我离婚五六年了，家里也没有财产，孩子归我，现在想把孩子监护权给孩子他爸，请问该怎么办。