老公和前妻离婚，离婚后房子归男方，能不能去掉他前妻的房子。