Боюсь второго брака

Ситуация - встретились, оба в браке, у обоих дети. Я в семье одинока. Я не могу решиться уйти - банально боюсь трудностей и переживайний близких - его жена, его дети, мой муж, мои дети. Все будут переживать.
Муж мой вообще человек инертный и самонадеянный - ему и в голову не приходит что я могу уйти. Мои попытки работать над отношениями, проблемами и освежением отношений - это выглядит ужасно. Он со всем согласен, готов принимать мои вливания в это дело, а сам только на словах участвует в этом, т.е. день-два может и помнит, ну максимум неделю, а потом видимо считает что и так живем хорошо. Или вот по мелочам - то что я прошу его делать (не хочу конкретики, допустим закрывать дверь в ванну, т.к. это мешает мне ходить свободно по дому - такова планировка квартиры и я постоянно бьюсь в нее лбом) - это он вспоминает если конфликт и обострение отношений. Короче работать над семьей и мужем, имхо, можно не предлагать - 6 лет бьюсь в закрытые ворота. Первый раз сказала мужу что уже не жду от него ничего - года 3 назад. Последний с месяц назад. Не то чтобы он меня не любит - он просто не умеет любить, у него свои интересы и предпочтения, своё видение мира. Его отношения с детьми мне тоже не нравятся. Очень. Точнее со вторым стало лучше, но с первым имхо контакт у них не налажен и вряд ли наладится :(((( Они ему мешают. Он любит их, в принципе, но не ежедневно и ежесекундно, не в любом виде, а сытых, умных, тихо играющих в углу и спящих в своей комнате.
Мне жалко его жену (тоже похоже не представляет что он уйдет) - она останется с детьми, хотя она очень обеспеченная женщина и хороший доход у нее есть и муж ей оставит всё-всё-всё. Ко мне придет в одежде только :)))
Мне страшно представить реакцию его родни (много лет женат), примут ли они меня, скорее всего в штыки :)
Мне страшно что это ни к чему хорошему не приведет (из серии на чужом несчастье счастья не построишь).

Сама думаю что дура, что надо думать о себе и своих детях, о СВОЕМ счастье и о СВОЕЙ любви. А я какими-то вбитыми с детства представлениями живу, о добре и зле. Короче никак не решусь. Понимаю, что в своей семье я не испытываю счастья. И на новую решиться боюсь. Каждый день жалею, что вот так и проходит моя жизнь в изображении нормальной семьи - перед детьми, родителями, соседями, родственниками и т.д.

Знаю что никто не решит за меня. Научите думать, решать, или наоборот, идти за своей интуицией, эмоиями, просто ЖЕЛАНИЯМИ жить лучше, чем сейчас.