Если это возможно, то куда мне надо обратиться и что для этого нужно сделать?

Если есть основания, то вы сможете лишить мужа родительских прав. На основании ст. 69 Семейного Кодекса РФ родители (один из них) могут быть лишены родительских прав, если они: уклоняются от выполнения обязанностей родителей, в том числе при злостном уклонении от уплаты алиментов; отказываются без уважительных причин взять своего ребенка из родильного дома (отделения) либо из иного лечебного учреждения, воспитательного учреждения, учреждения социальной защиты населения или из других аналогичных учреждений; злоупотребляют своими родительскими правами; жестоко обращаются с детьми, в том числе осуществляют физическое или психическое насилие над ними, покушаются на их половую неприкосновенность; являются больными хроническим алкоголизмом или наркоманией; совершили умышленное преступление против жизни или здоровья своих детей либо против жизни или здоровья супруга.

На основании ст. 70 СК РФ дела о лишении родительских прав рассматриваются по заявлению одного из родителей (лиц, их заменяющих), прокурора, а также по заявлениям органов или учреждений, на которые возложены обязанности по охране прав несовершеннолетних детей (органов опеки и попечительства, комиссий по делам несовершеннолетних, учреждений для детей-сирот и детей, оставшихся без попечения родителей, и других). Дела о лишении родительских прав рассматриваются с участием прокурора и органа опеки и попечительства. При рассмотрении дела о лишении родительских прав суд решает вопрос о взыскании алиментов на ребенка с родителей (одного из них), лишенных родительских прав.