我想上诉申请抚养权变更，法院会判抚养权给我吗？之前都不负责任，我怕到时候他又过来抢孩子。