男人很爱情人却不离婚的原因有哪些