所以一直拖到房产税出台了才能进行交易，并要求卖方退还定金，卖方不肯退还定金

我与2010年再昆山市千灯镇意向购买一套商品房，并在房产税没有出台之前就签订合同，并在签订合同时支付卖方10000元定金。可是因为卖方房产证没办下来，所以一直拖到房产税出台了才能进行交易，再此之间，作为我们的第三方也就是中介方，连一通电话都没有给我们，一直是我们买方再打电话催促中介方，等到我们买方递完所有的购房材料，在买方强烈的要求之下，中介方才帮我算出了超出当时预算的五万多元的首付款，我们买方非常不满，所以提出取消购房交易，并要求卖方退还定金，可是事情拖到2011年五月，卖方不肯退还定金，中介方不肯处理此事，我该怎么做，望指教。