Как расстаться с любовником

Доброе время суток.
У меня второй брак. С мужем живем 10 лет. 7 из них я имею любовников (отношения длятся от года до 3-х лет). Принципиально встречаюсь с женатыми. (встреча с холостым мужчиной привела ко второму браку). Если даже расстаемся, то остаемся добрыми друзьями.
Сейчас уже год встречаюсь с мужчиной младше меня на 5 лет. Женат, двое детей. Встречаемся не часто (1-3 раза в месяц). Он полная противоположность мужа.
Все было нормально до тех пор пока любовник не сказал, что хочет развестись с женой. Разговоров о совместной жизни никогда не вели. Но если я захочу, то он останется со мной.
С мужем нас связали в свое время не столько любовь, сколько жизненные обстоятельства. Сейчас отношения строятся на привязанности и привычке друг к другу.
Мне не хочется терять ни мужа, ни любовника. Они прекрасно дополняют друг друга. Но ситуация заходит в тупик, потому что после развода могут начаться проблемы с любовником.
Посоветуйте, что мне делать?