听说某种情况下防火门必须要加玻璃?

没有这个规定。
但紧急出口的公共通道门一般会考虑设计通透效果。但不是强制规定。

防火门上是不装玻璃的。

你说的加玻璃估计是装在门上的，用于隔烟的，档烟板吧。

没有听说过有这个规定

一般防火门是不用加上玻璃的

防火玻璃门适用于防火门，防火窗等镶玻璃防火构件,具有良好的耐火、隔热、隔声及透光率高等特点,可用做现代建筑中具有防火功能的大厅门、楼道防火分隔门等。

建议你可以参考下专门资料介绍