Трудная ситуация

У меня случилась неприятная история, в которой пока не могу до конца разобраться. Ситуация такая - я развелась с мужем почти год назад. По очень серьезным причинам (там - злоупотребление спиртным и агрессия и тп), человек малоадекватный, договориться мирно ни о чем невозможно. Ребенку чуть больше года. Теперь же у меня новая жизнь и любимый человек, с которым у нас возникли серьезные отношения с далекоидущими планами. И вот вляпываемся мы в такую историю: когда мой любимый был у меня, в три часа ночи бывший муж начал ломиться ко мне в дверь. сначала звонки по телефону (отключила его), затем в дверь.... отключила и свет, чтобы звонок не трезвонил и не проснулся ребенок. потом БМ видимо ушел - дверь я открывать не стала и никаких разговоров с ним не вела. Очевидно, приходил опять пьяный, на трезвую голову не стал бы лезть. что ему было надо, пока не знаю. Но сам факт. Мой любимый выпал в осадок. Он конечно был в курсе всей моей прежней истории и знает о характере БМ. Но сам с этим столкнулся впервые. Конечно, наша ночь была испорчена, настрой на нуле, рано утром мой мужчина уехал к себе. через пару дней мы встретились и обсудили ситуацию. Моя точка зрения: во-первых, меня задело, что утром он так "сбежал"; во-вторых, может ему не надо было меня слушать (я не хотела открывать дверь), а надо было ему самому открыть дверь, чтобы БМ увидел, что у меня действительно своя жизнь, он никто - может больше бы не совался и не трепал мне нервы.... Позиция моего любимого: прятаться в темноте, как мы с тобой сделали, мне претит; а открывать дверь пьяному идиоту - дело кончится мордобоем, а я не мальчик, чтобы драться в 40 лет, да и потом он отец твоего ребенка, значит, это тоже неприемлемо. Поэтому ночевать у тебя я больше не буду. Надо как-то решать эту проблему.
Во многом я его понимаю, он наверное как-то уязвлен как мужчина....Но, во-первых, а не трусость ли бежать от проблемы таким способом - проводя с любимой женщиной вечер и потом убегать из ее дома? Во-вторых - а причем тут то, что БМ - отец ребенка? Мой любимый считает, что не имеет морального и пока даже юридического права (так как еще не мой муж официально) прогонять моего БМ и тп. Но ночью пьяный товарищ пришел явно не к ребенку, зачем смешивать мух и котлеты? И что, разве нужен обязательно штамп в паспорте, чтобы получить "моральное и юридическое право" послать чужого нам человека, вторгающегося в нашу жизнь, куда подальше?
Я пока не могу разобраться в том, прав ли мой любимый человек. Что-то в его позиции меня смущает. Может быть, вы поможете расставить точки над i...