我不想和我丈夫住在一起，但他总是拒绝离婚。我该怎么办？他没有责任感。