中介反悔减免佣金，如何应对？

我在2009年购买一套房子，由于中介在办理过程中工作不力，给我增加了许多麻烦，许多工作都是由我亲自与卖方联系，以及跑相关部门，因此我提出要减免部分佣金，经办人经请示，口头告知我同意减免，并在房屋过户后结清余款。现该公司反悔，事情过去半年，要我交回减免的部分佣金，请问如何应对？谢谢。