丈夫的婚姻不忠，现在双方都想离婚，妇女已经在家里结婚了，有孩子，由丈夫的家人买房，以丈夫的名义寄宿，两个孩子同意由丈夫离婚，由一个人抚养，询问离婚时该如何分配这所房子。