加入外国国籍后，在中国护照没有过期前

你的中国护照如果已经作废了(封面被剪去一角)就说明你已经放弃中国国籍了,那样就一定要用外国护照了.即便在使领馆登记放弃国籍也是要尽快去登记并作废护照的,不然一旦被中国边防查到会按双重国籍对待的.

...没怎么看懂...

但现在也在为要不要入籍而烦恼，中国又不承认双重国籍

没明白你的问题是什么？为什么“这样是不行的”？

可以的。反正记住，中国这边，用哪本护照进来的，就一定要用哪本护照出去。

有人小聪明，用中国护照进来了，结果护照过期，再拿新护照出境，就要罚款了

既然已经加入了外国国籍，就应该到中国大使馆办理退出中国国籍的手续，拥有二个国籍是触犯法律的行为。你可以到领事馆说明情况，再办理签证，不然电脑里是有记录的。