不是常对你说吗?我是不能轻易离开的。这个句子是设问句吗?

不是设问句。
因为两句不是问题与答案的关系

你知道我为什么离开你吗
因为在你身边我压力很大

这是设问。

这个句子需要前后文，最好有原文。
有可能是设问，不能完全排除。

不是的 设问句的特点是自问自答

不是设问句。设问句虽然是自问自答，但和你所写的句子是不一样的。你的问句不符合设问句的格式

反问句：“不是常对你说吗?我是不能轻易离开北京的。你要知道现在是什么时候，这里的工作多么重要。我哪能离开呢？”（出自：十六年前的回忆）

不是设问句。楼主的句子还可以把句中的问号改为叹号，也是可以的，