我家是农村的，我与发生房屋土地纠纷的是我的邻居。我两家一共四间连体的二层楼房屋现在要求拆除还可能了吗？

您好，我家是农村的，我与发生房屋土地纠纷的是我的邻居。我两家一共四间连体的二层楼房屋，我家有三间，而邻居家是一间，两家之间中间有伙墙，我家先买的房屋三间二层楼房屋，邻居家在我之后买的另一间二层房屋，邻居家买完房屋后，觉得自己地方不够用，就在他买房屋，其屋后紧接着后墙新建了一处小房（二层），在建时我发现其占用了我家后墙（伙墙为界）一米五宽，就是紧贴我家后墙，当时我找到他家协商让其拆除，后经过协商暂时答应让邻居家建一层，要求是我随时用，随时给我让出占用我家后墙一米五宽的地方（口头答应，没有文书），又过两年，邻居又再一层的基础上建了二层，我也没有阻拦，至今已建十多年了，但是现在，我家要求邻居拆除后建房屋（共两层），其理由是我家后墙要做保温，后墙要装修，邻居家现在后建的房屋阻碍了我家施工，因为被占用的一米五后墙在邻居家屋里了，无法施工。十多年的今天，我曾几次去邻居家协商，邻居以当初同意为理由不拆除。他家后建的小房没有宅基地证。当初也是考虑邻居之间和谐相处，才口头答应让其占用自家一米五宽后墙，但也说了我家要用时就给让出来，可现在邻居不念旧情。当初口头答应，就能成为理由了吗，现在要求拆除还可能了吗