你不想留下我吗？用英语怎么说？

在美国英语中，说我这次不得不去是这个意思。

如果觉得不够，可以补充一些:

我得走了，谢谢你再次邀请我们留下来！不直接说不是不礼貌的。