我真的不想和他一起度过，他在外面找小三，他还不承认骂我，理直气壮地说要找……我想离婚他又不离开我该怎么办，谢谢。