买房与中介和卖主前妻签订了三方定金合同，前妻无代售委托公证书

我在不久前看上了一套房子，并与中介及卖主的前妻签订了三方定金合同，交付了5万元定金到前妻手中。但目前出了点问题，没有钱购买房产，所以想取消合同并收回定金。房产是属于卖房人的，房产证上只有买房人的名字。但是签订定金合同时，是由他的前妻签订的，而且没有相应的委托书，只是在合同上签字处以小明（小李代签）的格式签了字，小明是房主名字，小李是前妻的名字。所以想咨询一下，该合同是否本身是无效合同，我是否可以要求退回定金。同时，合同里面有一项写的是，如果买卖双方中任何一方违约，都需要缴纳给中介房价3%的服务补偿金，所以想问一下，如果这个合同有效，是否需要给中介这笔钱。谢谢您的帮助！