江西上饶的 农村土地纠纷

我外公有块地是原来生产队分下来承包的，后来因为98年洪灾村里要规划造房子就收回去了，同时还有另外十几家的土地也收回去了，后面准备让村民抽勾，但是抽勾后一直没人要，早先的土地不值钱。1999年土地荒芜了一年，并且1999年村委会因为地地荒芜补偿了我外公家400块钱，2000年的时候把地退还给我外公家了，我外公这块地一直种到现在，但是现在有个村民说这地是原来他们抽勾抽过的，应该是他们的。请问这从法律上来说怎么解决这事呢？