我合同有一条是:买方中途不买,扣违约金若万元。试问一定要等对方同意才能违约吗?