男方没有离婚让女方怀孕了，女方当时跟他在一起并不知道男方没有离婚，男方该要付什么责任。