土地互换纠纷2010年2月我与李顺昌…

土地互换纠纷2010年2月我与李顺昌互换了一块土地,没有签订书面协议,也没有经过备案。现在乡人民政府征用了我换来的这块土地(李也承认土地是我的),但乡人民政府说我与李换地未经村委或乡人民政府批准,是违法的行为,并强行退回给了李。请问:我与李换地的合同是否生效,即这快土地的使用权是否属于我的?