土地纠纷在2004年我父亲买了别人的…

土地纠纷在2004年我父亲买了别人的房子，和房子一起6亩耕地和2亩退耕还林，并签订合同，在2005年我们办了过户手续。当时退耕还林的手续办不了就拖下来了，在2008年可以办了但是卖方不同意了，现在他们想把2亩退耕还林的要回去，想反悔。现在那个2亩退耕还林已被政府征了搞建设，适当的给我们补了一些钱，他们想后悔还要起诉我们，请问各位，这官司我们能赢吗？谢谢各位帮我解答一下