然后我又在昆山另一处楼盘买了第二套房,无个税,而且他们的贷款利率也很高

我之前在昆山一楼盘买了一套房子,全款付清的。然后我又在昆山另一处楼盘买了第二套房,做贷款的,我在昆山无社保,无个税,通俗点就是没有达到贷款条件,后面售楼处的小伙帮我补交了税款什么的,现在交了首付18万,那个房子我不想要了,贷款我也拖着不想做,我想退掉,可开放商他们跟我说要交10%的违约金什么的,所以一直拖着,而且他们的贷款利率也很高,上浮15%,我们的钱也是辛苦赚来的,所以更不想买了,请问我该怎么办,我是真心不要这个房子了!!!