От хороших жен мужья уходят в надежде, что следующая будет еще лучше, а от плохих не уходят, потому что думают, что другая будет еще хуже! (с)
Вообще, ситуации разные бывают и сложно рассматривать их в целом, бывает чувства перегорели и уходят из семьи в поисках новой любви, а бывает блуд (особенно в определенном возрасте), после которого наверняка изменник захочет вернуться, ну а бывают свадьбы по залету или расчету, и тогда если нет любви, (а в большинстве случаев, и счастья) то вряд ли стоит осуждать того, кто тоже хочет любить и быть любимым и уходит из семьи, много чего бывает. Как сказал Толстой: "Все счастливые семьи счастливы одинаково, а все несчастные - несчастливы по-своему!".
А вообще, лучше и правда никого не судить, чужая душа потемки и даже при внешнем семейном благополучии, никогда не узнать, какие чувства у людей наедине, кто и почему изменил, кто почему ушел.