女方向男方提出诉讼以男方不能生育为由要求离婚，那么男方能否要回彩理。