房屋侵权 我父亲于95年以集资方式建房一栋，房屋于96年四月建成。手续、建设管理、资金等都是父亲一人操办。当时我已婚，我出了二万元钱左右，并有记录，其中记录前妻出资300

我父亲于95年以集资方式建房一栋，房屋于96年四月建成。手续、建设管理、资金等都是父亲一人操办。当时我已婚，我出了二万元钱左右，并有记录，其中记录前妻出资3000元。房屋当时总造价10万元左右。我于2006年9月与前妻协议离婚，写明无任何经济债务纠纷。现在前妻还懒在我家不走至今三年多了，并以记录的房屋出资3000元为由，说房子她也有一份，据不搬走，请问这是不是侵权，我该如何打这场官司？谢谢。