我家与同村一家口头协议交换耕地，双方已换种4年。现在因为土地升值对方要私自换回。