离婚协议为房屋归女方和孩子，孩子抚养权归男方，房屋目前有贷款，请问如果让男方履行协议。