Ребенок меня не любит

Здравствуйте! Совсем не знаю, что делать. 1,5 года назад мы с мужем усыновили мальчика. Тогда ему было 1,9г. Я его очень-очень сильно люблю. Сначала и он меня любил, а вот мужа остерегался. Не разрешал ему брать себя на руки, играть. Даже были случаи, когда мы вечером гуляли и встречали папу с работы, и сын при виде папы начанал плакать. Еще бы, он до этого в жизни не видел мужчин (в ДР с рождения). Муж переживал. Я и мои родители бросили все силы на то, что бы объяснить малышу, что папа тоже хороший. Постоянно твердили, что папа хороший, учили говорить слово первое "папа", ну и т.д. В итоге он теперь любит папу, они с ним лучшие друзья. а на меня он ноль внимания. Хотя я с ним сидела дома первые пол года, а весь прошлый год мы ездили заниматься к логопеду, остеопату и вообще много проводили времени. Никогда я его не обижала, а муж частенько и тапком шлепнет (когда малыш разыграется или не хочет есть).
Как быть?
И еще у нас произошло чудо, я забеременела и родила ребенка. Теперь у нас двое детишек, как я и мечтала. Вот только грустно мне от того, что старший так ко мне относится. Например, сегодня утром (мы были на даче) сидит и смотрит с дедой телевизор. Прихожу я (а обычно мы с мужем вместе просыпаемся и приходим), так сынуля вскочил и пробежал мимо меня смотреть, проснулся ли папа. Конечно, если ему сказать "иди поздоровайся с мамой", то он и поздоровается, и обнимет, и поцелует. Но сам относится ко мне ровно и спокойно.
Может, это реакция на рождение братика? Но он и еще до его рождения стал так ко мне относиться.
Кстати, он еще очень любит мою маму, точно так же бегает за ней, как хвостик.
В этом году мы не отдаем его в садик, будет дома со мной и братиком, может быть это поможет в наших отношениях?