Как защитить детей и себя от неадекватного бывшего супруга?

Ситуация следующая. Так получилось, что будучи женат "по залету" и живя в браке два года, встретил женщину, которую полюбил, а она полюбила меня. У нее тоже десятилетний брак, двое несовершеннолетних детей. Мы общались, но до измены не доходило, оба считали это неприемлемым. В конце концов ситуация решилась-мы с ней сьехались, потому что по другому уже просто не могли. Ее муж ушел, я ушел от жены. И далее начались приключения. Муж-достаточно неадекватный человек, ушел он втихаря, вывез большую часть имущества, включая вещи детей, теперь отказывается это все отдавать. Так же-так-как последние два года он не работал, а сидел на шее у жены-оставил после себя кучу долгов, которые естественно тоже отдавать не собирается. Из-за такого положения с финансами, а также полного завала на работе, т.к. мы оба работаем, чтоб эти долги отдать-ни я, ни она еще не начинали бракоразводный процесс. .. Он встречается с детьми-мы ему сначала не препятствовали, но он начал рассказывать мальчишкам (4 и 6 лет) всякие гадости про маму, акцентируя внимание на том, что он их так любит, у них особые отношения, а маме они не нужны (речь идет про маму, которая несколько лет тянула всю семью, две кредитных машины и сьемную квартиру и соответственно если и появлялась дома-то падала, а этот товарищ сидел дома, устраивал постоянные скандалы по любому поводу и ничего не делал). В общем в связи с его поведением и тем, что он рассказывает детям-в голове у них полный бардак, они плачут по ночам, им снятся кошмары и т.д... Он не реагирует ни на какие попытки договорится, игнорирует мать, может приехать-забрать их из садика и увезти в неизвестном направлении, может позвонить в два часа ночи, чтоб поскандалить. Сегодня ситуация приобрела новый оборот-мы с утра садились с детьми в машину, он появился и напал на меня. Оба мы большие сто килограммовые дяди, но я драться с ним не хотел, тем более на глазах детей, поэтому просто блокировал его удары и слушал его бешеные вопли на весь двор... В руках у него были какие-то железки, но до беды не дошло, только слегка покоцал мне руки. Женя с детьми в это время отъехала в сторону садика, поняв, что его не урезонить. Я через время ушел туда же под его вопли. В общем вопрос следующий:-то что нужно разводится-это понятно-сделаем. Как можно избежать повторения подобных ситуаций? Товарищ в полном неадеквате, понимать ничего не хочет и старается сделать только всем хуже, в том числе и детям, которых он якобы любит. У меня бродит дурацкая мысль после сегодняшней драчки, что так-как поле боя вроде как осталось за ним-он может повторить. И мне придется бить его в полную силу, чего бы очень не хотелось делать-ибо тогда окажусь в полиции. Как ограничить его возможность портить нам жизнь? Мы не против, чтоб он встречался с детьми, но при этом он не может делать это адекватно. У него нет ничего более-ему 51 и он абсолютно никому не нужен-поэтому он сосредоточен на том, чтоб портить нам жизнь. Нам 34-36, и мы просто хотим жить дальше. Кстати дети меня приняли...