二手房买卖，买方委托中介装修，后中介代卖，但是买方强调没有授权，买卖合同是由他人代签的应该怎么办？

二手房买卖，买方委托中介装修，后中介代卖，但是买方强调没有授权，买卖合同是由他人代签的，签的是代理卖方，卖方一直强调合同是无效的，但是现在已经进行买卖了，已经办理到银行贷款下款了，就等着下款，但是卖方嫌时间太久，不想卖了，已经更名过户给买方就等贷款下款，但是时间限制已经超过了，原本要求3个月，但是现在都过去6个月了，还有就是目前买方是以1000元每月租住，请问我是买方，应该怎么办