2009年因镇里拆迁改造，09年经双方协商，用我的房屋，车库 我是北京人

2009年因镇里拆迁改造，09年经双方协商，用我的房屋，车库，附属物及果树及三亩土地置换在原地给我1处房屋，当时镇书记及镇长口头承诺，13年建成以后，由镇政府与开发商协商后，由镇政府把房屋钥匙给我，政府让我签订承诺书，说不参与开发，不干扰开发商工作，用我的补偿款置换房屋一处。经过自己是用三年后，开发商起诉我，说偿还剩余房款，政府也不承认此时。现在我该怎么办？