我家居民房建设已经三四十年了，最近边上弄了个祠堂

我家居民房建设已经三四十年了，最近边上弄了个祠堂，因为我们这里房子比较多，密集。祠堂建设起来外形庞大。跟我家墙边完全挨着（工作人员阐述没有我家房子祠堂那边还会扩张的更大），下雨天这个雨水从祠堂瓦片上滴下，一直滴在我家的房墙上，湿哒哒的。晴天一片墙阳光照射不到了。烧开水煮饭的时候 烟囱的烟吹像祠堂边上的木头上。也容易发生火灾，非常不安全。现在每天都影响我家邻里建筑，怕我家房子以后很容易塌陷，请问像这个情况，祠堂允许拆除吗，而且祠堂建设没有证批下来建设的。懊恼，求帮助