可以先协商离婚，如果协商不成，就需要起诉离婚。根据情况，女方可以收集丈夫不忠的相关证据，提出离婚损害赔偿金，让丈夫少分或不分财产。离婚精神损害赔偿责任是一种法律责任，故过错方的违法行为是指违反相关法律强制性规章的行为。法律依据：《中华人民共和国民法典》第一千零七十九条夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。人民法院审理离婚案件，应当进行调解；如果感情确已破裂，调解无效的，应当准予离婚。有下列情形之一，调解无效的，应当准予离婚：（一）重婚或者与他人同居；（二）实施家庭暴力或者虐待、遗弃家庭成员；（三）有赌博、吸毒等恶习屡教不改；（四）因感情不和分居满二年；（五）其他导致夫妻感情破裂的情形。