Отцу ребенка, выпущенному из колонии, грозит забрать ребенка и спорить об алиментах - что делать?

Сложилась такая ситуация, вышел отец ребенка из колонии, сидел 6 лет, отцовство оформлено, около полугода платил алименты примерно раз в 2-3 месяца по 2000-5000 тысяч, сейчас пристава стали списывать у него часть зарплаты, теперь он грозит подать в суд и забрать ребенка. К слову, видится не запрещаю, живём с ребенком в другом городе, он просит оставлять дочь у него, я этого делать не хочу, так как она с ним вовсе не знакома, виделись они раза 2, как отца она его не знает, если просто приехать и оставить ее в чужой семье, думаю это будет тяжело психологически ей. Скажите, пожалуйста, что делать в данной ситуации?