我老公一直对性特别热衷，以前偶尔会找其他人，我从不接受到接受。之后，老公希望我也和别人约，说比他自己约起来更让他兴奋。多年争执下来，目前的状态是，老公已经不怎么约，但是对我约的期望值很高。我真的不知道怎么办好了，谁能告诉我老公绿帽情结很严重怎么办，要不要离婚呢