这是一个男的他不给这样会对我造成什么影响如果他一直没有还钱

我在QQ上和一个人加了好友 那个人向我提出性服务需求 然后我同意了 结果到最后我才发现 这是一个男的 然后连见面都没见到 就从我这边先后通过银行卡号转账5176元。然后一共先后三次转账，在第一次时我要求返还 他不给 然后又再次进行诈骗 但是他说因为没有服务 会进行退款。但是到了昨天他和我说因为银行系统问题银行转账被退回去了 他说在这周六一定会退还我所有的钱 并要走了我的支付宝微信收款码， 而且他还知道我的手机号码 银行卡号姓名 这样会对我造成什么影响 如果我去警察局报案 警察大概会如何处理 如果他一直没有还钱 这应该是属于诈骗行为