これ、すごく難しいですよね。私も同じような議論をしたことがあります。納得したわけではありませんが、価値観の違いということでケリをつけました。
私は学生のときからアメリカに住んでいて、アメリカの日系企業に就職しました。たまに同僚と会食をする機会があったのですが、ある時、日本人男性社員（既婚）が日本の風俗はバリエーションが素晴らしいという話をし始めたのです。成人男性が公の場で性的な発言をすること自体とても違和感がありましたが、興味も多少あったので「既婚者なのに風俗にいくのか」「いつ行くのか」「罪悪感はないのか」などということを聞いてみると、旦那さまと同じような返答でした。日本人サラリーマン全てではないと思いますが、確かに旦那さんのいう通り、既婚者でもノリや付き合いで風俗などに行くという人たちもいるようです。そして、悪いことをしているという意識は全くないようでした。だから公の場所でも話してしまうんですよね。
こういうのは価値観の違いなので、どこまで行っても平行線だなーと思った経験があります。