现在找了个律师代理，我们之间没签代理合同。要求他退还代理费吗。