台州市我跟我的邻居签了造房子的协议（村和镇干部一起在场签的）。我把我的地跟他换（大小相同平方米，大家.

我跟我的邻居签了造房子的协议（村和镇干部一起在场签的）。我把我的地跟他换（大小相同平方米，大家都是用来造房子），协议写明，他如果在我房子前面造房子的话，要距离我的房子11米。但是他现在距离没有11米，并且还少了好几米，但是他的房子建造还是批下来。我想问下，我现在要怎么办。