我一时疏忽他让我先交200块钱定金，之后我觉得有问题，我说不买了让他退我定金，他不退，我该怎么办。