我与前男友生了一个小孩，但因家人反对分手。小孩送给他哥抚养，先在他老是那小孩纠缠我，我该怎么办。