客户自己过错户反过来要我赔偿_湖南岳阳

你好 我有一套从他人手里购买的公证到我名下的房屋于8月15号完成过户，在完成过户后，中介与买房人发现由于他们自己的过错导致错买了我的防御，中介带买房人看的不是我的房屋，本套房屋于8月5日在中介的指引下签订合同，我并不知道买房人看的不是我的房子，中介和买房人都以为他们买的是我的房子，在中介的指引下与对方签订合同并移交房产证和国土证至中介公司，直至15号过户之前我都没有再联系他们，整件事我并不知情。请问这种情况对方以重大过失的理由撤销我的合同吗。并且还要我赔偿违约金.