Муж требует видеться с ребенком, но не выполнял свои обязанности - что делать в подобной ситуации?

С мужем в разводе, есть ребенок (почти 3 года ему) бывший муж за все это время как родился ребенок не помогал ни деньгами ни чем то другим, а сейчас требует видится с сыном, ребенок его абсолютно незнает, и папой называет другого человека (гражданского мужа) на мой отказ о встречах с сыном бывший муж отвечает угрозами, я планирую подать на лишение его родительских прав, но боюсь ухудшить ситуацию, как быть подскажите пожалуйста, не хочу жить в страхе.