Важны ли хорошие отношения с родителями мужа?

Мы с мужем купили дом для постоянного проживания и переехали в него жить. Родители мужа тут же покупают дом по соседству с нами и тоже переезжают в него жить.
У меня со свекрами очень хорошие отношения, они хорошие и приятные люди. Но раньше мы жили на расстоянии, а сейчас они вот, прям под рукой живут. В результате они без конца ходят к нам домой и могут придти в любое время и без звонка. Вот хоть на минутку, но заскочат почти каждый день. Более того, они даже друзей своих тащат показывать наш дом и участок, не спросив нас - вот так бац! и прутся ко мне в дом совершенной чужие и незнакомые мне люди. Я в собственном доме не могу расслабиться, одеваться так как мне удобно, делать что хочется, я все время на стреме, что в любой момент они могут к нам зайти. Они еще и обижаются, что мы их в гости на чай не зовем, а как звать, если соскучиться не успеваем? Короче мне все это крайне дискомфортно, я не хочу так много и часто с ними общаться. Я человек довольно корректный и вида не показываю, но мне это уже надоело. Мужа тоже это не устраивает. Говорит, что он с родителями пытался поговорить, но мол у них в одно ухо влетело, а в другое вылетело и мол толку разговаривать нет, только отношения портить. Короче муж смирился. А я не знаю как мне себя вести: соблюдать нейтралитет, чтобы их не обидеть или плевать на их обиды и делать так, как удобно и комфортно мне?