韶关难缠土地转让纠纷

事情是这样的，在2007年的2月7日张，李，胡{三户人家}找我父母私自找人协商把责任田的一部分转让了过去，转了900钱，责任田的承包人是我爷爷，我家户主人也是我爷爷，当初我爷爷不知道有这个事情，现在有人要建房要过路从那几家手里用钱买路过。我爷爷知道后要求他们返还协议书销毁。几经调解无法达成协议。想通过法律来解决这事，但那几家人很是嚣张。说协议书在手里随便你。在加上事过三年就是板上钉钉的事了。不要想了。我觉得我爷爷当初不知道也没签过字，我爷爷的合法权利受到了侵害。我们能通过诉讼来解决问题吗？有多大把握？这是示意图的网址80.images22.51img1.com6000az62502021d7837a340f9ba84289cfe7c05d7.jpg