Как быть???

Помогите советом пожалуйста
Год назад познакомилась с мужчиной, отношения с самого начала складывались идеально. Через пол года стали жить вместе. Он был очень заботливаый и внимательный. Летом 2013 года собирались пожиниться.
До наших отношений он состоял в браке. Есть сын, 3 годика. Первая жена сама ушла от него, забрала ребенка и уехала в другой город, к другому мужчине.
После нового года, его первая жена умерла. Единагласно, нами, было принято решение забрать сына.
Теперь его сын живет с нами уже 3 недели. Первую неделю все было нормально. Но потом мы начали ругаться (не при ребенке конечно). А потом и ребенок перестал меня воспринимать, когда они вместе с отцом, сын говорит, что бы я ушла. А отец ни чего ему не говорил, пока я ему не сказала, что так нельзя. Теперь мой мужчина может целыми днями со мгой не разговаривать, если что то у него спрашиваю молча может развернуться и уйти. Раньше всегда делился своими планами, советовался. А сейчас тишина, ничего не рассказывает и не говорит.
Когда я пытаюсь поговорить с ним, он говорит , что любит меня и отмалчивается, пыталась объяснить ему, что это не только его жизнь, но и моя, что это НАША жизнь, опять молчит.
В выходные спал целый день, а я занималась ребенком, а когда попыталась его разбудить, он наорал на меня, что устал и хочет выспаться.
Думала, что я справлюсь, но что то не получаеться, обещенной поддержки с его стороны нет. Я незнаю как мне дальше жить и как себя вести.
Ребенком занимаюсь в основном я, отец почти всегда на работе, хотя я тоже работаю. Садик искала тоже я, отцу не было до этого дела, я неделю просидела дома с сыном.
Может быть я что то делаю не так, может зря согласилась на это? Очень трудно сейчас держать себя в руках и не бросить все.
Мне 28 лет, детей своих нет, опыта в воспитании, тем более нет.