是不是只要屋契主人不签字抵押就无效？

你可以主张撤消，这个属于无权代理，而抵押合同的效力是待定的。
民通规定，无权代理人以被代理人名义实施的民事行为，被代理人事后追认的，则对被代理人发生效力；反之，被代理人事后不追认的，该行为自始对被代理人不发生效力。该行为成后，被代理人表态前，行为的效力待定。

能够证明不是你的行为,就无效.