Как защититься от лишения отцовства на основании неуплаты алиментов - опыт и решение проблемы

Могут ли меня лишить родительских прав? Ситуация такая. Мы с бывшей женой в разводе. Алименты я исправно оплачивал. Проживал в связи с работой в других городах. Редко виделся с сыном. Последний раз когда я виделся с ребенком, жена провоцировала меня драку и угрожала лишением отцовства, но никаких противоправных действий я не совершил, а ребенок получил психологическую травму, в связи с чем потом наблюдался у психолога. Год назад обосновался в Новосибирске, а бывшая жена уехала с ребенком в Санкт-Петербург, не оповестив меня. Когда я смог их найти, она сообщила, что выходит замуж и им от меня ничего не нужно (в том числе алименты). С ребенком видеться не смог из за большого расстояния между городами и решил не лезть к ребенку, чтоб не портить ему психику различными разборками. Официального отказа от алиментов не было. Сейчас бывшая жена пытается лишить меня отцовства именно на основании неуплаты алиментов. Свидетелем отказа является моя нынешняя супруга. Подскажите, что я могу противопоставить, что меня не лишили отцовства? Замечу, что мужчина я благополучный, с достойным заработком, с хорошей работой и руководящей должностью. Не курю и не потребляю спиртные напитки. Не говоря о наркотиках. Не привлекался. Не судим. Сейчас усыновляю ребенка нынешней супруги от первого брака и уже получил положительное заключение от районной администрации.