Муж излишне честный

Я знаю, что и тема высосана из пальца, и скорее всего вы меня осудите (хотя больше, чем я корю, вряд ли какой-то аноним может), но у меня есть глупая проблема в отношениях с мужем. "Беда в том", что он излишне честный и доверчивый, с совершенно детскими подчас реакциями. Он может сказать что-то, совершенно не подумав, а потом очень переживать... Нет, в мой адрес фо па никогда не было, никаких "ты потолстела" или "невкусная отбивная". Но другим, особенно малознакомым людям он говорит что-то, что они потом мотают на ус. Пример - приходит на новую работу (точнее. подработку) к человеку, кот. он знает около полугода, но довольно шапочно. И вот они сели за кружкой пива-вина отметить "вливание в процесс" моего мужа, и тот мужчина-соработник рассказывает о мужу о своей новой пассии и показывает фото. На что мой муж, на трезвом глазу, ляпает: "у нее такая коварная внешность, она бывалая такая, смотри, как бы из тебя деньги не начала выкачивать" Тот посмурнел, но вроде согласился и перевел тему... И вот такое сказать малознакомому, по большому счету, человеку, с которым нужно держать ухо востро.
Когда я узнала, у меня почему-то такое раздражение началось. И я не могу понять причину этого чувства - что это, страх, что на мужа мужик затаит обиду и это испортит их дело (=читай, мужа выкинут из дела или как-то подставят?). И главное, как с этим раздражением бороться? Вот уж говорят: "простота хуже воровства".