我本来已经订婚了。我退了之后他又不愿意复婚了。这钱要不要还给他呢。他说不给他。就起诉我诈骗。