И есть ли какие-то хитрости или обходы, если всё же он может выписать нас?

Здравствуйте, такая ситуация... в неприватизированной квартире прописаны я, мама, мой сын, бывший муж, отец, после развода родителей контакта с отцом наладить не удалось, и когда мы в 2007 году попытались с сыном проживать в данной квартире, срезали навесной замок и заселились, вплоть до скандала, вызывали полицию, на что приехавшие нам ответили, что они не смогут нас охранять, договаривайтесь как-то между собой сами... мы пробыли там где-то пол недели и съехали, мой отец нас выжил оттуда, и больше попыток мы не предпринимали, маме он пригрозил расправой тогда же, и она соответственно тоже не рискнула здоровьем и не стала претендовать на проживание. Более попыток на проживание с нашей стороны не предпринималось. Отец заселился туда с сожительницей, ведут аморальный образ жизни, выпивают, гулянки у них. Мы пытались приватизировать свои доли, но отец не дал нам своего согласия. И дело встало. И недавно мой бывший муж мне сообщает, что отец просит его выписаться, мол чтобы не мужа не вызывали на суд, тк он планирует выписать нас оттуда всех через суд, тк мы там не проживаем там, подскажите, правомерно ли это? Я обратилась в паспортный стол, мне сказали, что он не может нас выписать, мы должны дать согласие. И есть ли какие-то хитрости или обходы, если всё же он может выписать нас? Заранее благодарю!