土地所有权问题

这是历史遗留下来的问题了。在70年代后期，由于我家的土地多，村公社便要求我们家让出土地给他们做房子，作为村公社的办公地址。我爷爷迫于无奈（父亲说的），让出了5间房的土地让他们做。那时候叫贡献，没有收取一分钱。现在村公社想把这五间旧瓦房推了，重新做。而我们想阻止他们这么做，要么用着旧瓦房，让其自然倒塌，要么拆了就不能在上面再盖新房。这样做可有什么法律依据？我们能否成功？