Нужно ли сохранять такую семью?

Запуталась я совсем и на душе так фигово.Вводное: с мужем живем 6 лет дочке 5 лет, брак был т.к. я забеременела. Все эти годы жили нормально второй год конечно было тяжело ребенок маленький и мы еще притераемся, но потом все было вроде бы нормально, до недавнего времени даже хотели 2-го ребенка (теперь думаю я больше хотела, но и муж был не против). Живем у мужа в 3-ке с его отцом он инвалид (алкоголик в придачу),я с декабря не работаю, но в сентябре планирую опять выйти на работу.
Так вот в чем суть: мы постоянно ругаемся, я ему что-нибудь скажу, а он орет. Н-р, он читал 2 дня книгу, вечером я его спрашиваю (смотрю он не читает): "Что дочитал уже?" А он: "Дочитал (с такой под**кой), а тебе то что?" Я говорю: "ничего просто спросила" А он: "Вот и не приставай". Потом я начала выяснять что я такого сказала, чтоб мне так отвечать и мы начали ругаться, я говорю что мы не можем как нормальные люди разговаривать. А он говорит, что хочет чтоб все от него отстали (и это не только вечер, а вообще). Потом еще дочь прискакала и попросила чтоб мы не ругались (перед ней мне больше всего стыдно). В итоге я обиделась и легла спать. А на утро он начал со мной опять говорить, я ему высказала, что меня не утраивают такие отношения и что поговорить он со мной не может нни о чем (привела в пример его общение с отцом, они вообще не разговаривают, только на бытовые темы или связанные с лечением отца. Я говорю, что же теперь только по праздникам общаться, а в будни нет?!). И это только один из примеров, мы постоянно в чем то сталкиваемся, его постоянно что-то раздражает (и это на фоне того что я только 3-й день дома до этого 1,5 мес. у родителей гостила и мы виделись только по выходным). Я уже ему пустырник купила, чтоб он поспокойней был, он и сам понимает что весь дерганный и нервный, но ничего не может с собой поделать, но мне тоже не хочется терпеть когда на меня весь негатив сливают.
Вот я думаю, это вообще проходит или пора сваливать, и себя жалко и дочь, но мы его очень любим и я вообще не представляю как я буду жить без него и другого мне никого не хочется, но и с ним тошно ( в эти моменты) жизнь то у меня одна. Еще останавливает переезд, придется уезжать в другой город к родителям, там нужно с садом что-то решать и вообще со своей жизнью. Посоветуйте, что делать то?