Как защитить свои права на квартиру после развода - история жительницы г. Семилуки

У меня к вам очень важный вопрос. Будучи замужем и имея трёх несовершеннолетних детей приобрели квартиру в г. Семилуки, участвовали в долевом строительстве. Из той суммы что была внесена полностью за квартиру, миллион мне подарил мой покойный теперь уже дедушка, так, как он был участником ВОВ, которые были у меня на счёте. Ещё одну часть денежных средств внесла я, использовав мат. капитал. Из общей стоимости квартиры мой супруг внёс только 80000 т. р. Дом сдался в эксплуатацию в 2013 году, но мы там не проживали, супругу не нравилось жить в городе. Зелёное у нас пять, так как был использован мат. капитал. В 2017 году мы с супругом расторгли брак, не сложилось. В 2019 году этот дом многоквартирный признали аварийным, и началась программа по переселению жильцов. Я взяла компенсацию, и сама нашла квартиру естественно с помощью реелторов. Купила, и опять получается так, что и бывший теперь супруг имеет одну пятую часть в этой квартире. Вторая квартира была приобретена уже вне брака. Теперь он заявляет на неё свои права. Подскажите пожайлуста, что нужно сделать чтобы бывший супруг оставил нас с детьми в покое. Мы не живём с ним вместе уже почти три года, но он не даёт нам жить спокойно. В данный момент я с детьми проживают у родителей в деревне.