МЧ и наши дети

Есть МЧ, вместе живем 9месяцев. У меня двое детей, у него 9-летний сын, за это время мой МЧ полюбил моих детей и они его тоже, я в свою очередь тоже к его сыну отношусь со всей душой, стараемся всегда вместе проводить выходные. Но есть одно НО, которое не дает мне покоя...дело в том, что его бывшая жена (которая кстати сама от него ушла к другому) периодически просит забирать сына, когда ей вздумается, естественно папа не отказывает (любит сына очень) и мой ненаглядный всегда остается в их общей квартире с сыном, несколько раз ночевали у меня, но потом решили что ездить с моего района в школу им неудобно...вообщем не в этом суть. Я никак не могу себя перебороть, чтоб смириться с тем фактом, что ему надо побыть с ребенком в своем личном пространстве. Получается, что когда надо побыть ему с ребенком, летят к чертям все планы и мои и его, по большей части конечно мои, т.к. хочется чтоб мой любимый проводил время и со мной. Что это ревность? пытаюсь приручить? Уже несколько раз говорила себе, оставь все как есть, это всего лишь обстоятельства, но как подумаю, что эти обстоятельства каждую неделю по два-три раза...коробит(( Он меня сильно любит , все делает для меня и детей, я его тоже сильно люблю, но чувствую что мой эгоизм берет вверх(( как поработать над собой?