Кара, вам стоит подумать, какой урок вы должны извлечь из этой кармической ситуации - именно кармической . У меня была такая ситуация много лет назад с моей сестрой, слава богу у нас было своё жильё в другом городе, и слава богу, что я нашла в себе оправдание для её поведения, нашла и свои явные эгоистические загоны в той ситуации, которые оправдывала тем, что у меня - муж и двое детей, а она свободна и мужчина её мне неприятен ...
Через год после нашего отъезда, она приехала к нам в гости и просила прощения, мы великодушно простили её, но честно говоря в той ситуации не было правых . С тех пор прошло 20 лет и слава богу мы с сестрой родные люди . (с мужчиной тем она вскоре рассталась, встретила другого и с ним, с другим, до сих пор )
В вашей ситуации вся сложность в том, что вам некуда уйти и брату некуда - так подайте на размен, как-нибудь решите эту задачу с жильём .
Неужели вы готовы выгнать его просто на улицу ? Я так поняла, что родителей у вас нет, брат одинок и вы не близки с ним душевно . У вас есть муж, а у него кто ? Чем он заполняет эту пустоту ? Ему нужна любовь и помощь близкого человека,
вы его любить и тянуть не хотите . Сначала отчуждение, а теперь ненависть обоюдная видимо и что дальше ? Поножовщина ?
Куда заведёт вас это противостояние ?

Вы написали, что живте вместе с братом.
И он таскает всяких знакомых к вам с мужем в дом.
А он наверное думает, что он водит их не к вам, а к себе, в свой дом.
Квартира чья вообще ? ваша или общая? если общая, то может не стоит натравливать на него сущей ?
Самое большое, что я б сделала -хранитель равновесия. Чтоб конликтов не было. А вообще любовь и понимание творят чудеса.
Ведь родственников не выбирают, это те люди, с которыми придётся иметь дело всю эту жизнь, надо учится находить с ними общий язык.
чем брат то занимается? учится или работает? у него возможность съехать есть?