现在他死了,我们还有没有办法把地拿回来,因为我们都不想卖,不过听说父亲有和他签字,我们还有没有办法?

各位律师：
我们是农村用地，在2003年买方以买人口数为由，把我们家5分地买2万元。拿走，建成房子，可是这件事家里面没有人知道，只是这事是父亲去卖的。现在他死了，我们还有没有办法把地拿回来。因为我们都不想卖。不过听说父亲有和他签字。我们还有没有办法

农村责任田严禁私下买卖交易。