Необоснованный иск о порядке общения с ребенком - моя сторона и официальный статус проживания

Ситуация такая. Сегодня мне позвонили из органа опеки попечительства, сообщили, что мой бывший муж (развод состоялся месяц назад) подал иск, в котором указал, что я препятствую его общению с нашей дочкой (4 - ех лет). Это неправда, он может приходить к дочери в любое время, общаться с дочкой, но я не разрешаю ему гулять с ней одному (на то есть очень много веских оснований, том числе, несколько моих заявлений в полицию - о побоях, нанесенных мне, в присутствии дочери, о его курении наркотических смесей, ругательстве матом при нашей маленькой дочке и т.д. в общем, я опасаюсь за здоровье, жизнь моей дочери, так как бывший муж часто бывает неадекватным. По этим (и еще многим доводам!) я опасаюсь отпускать его одного с маленьким ребенком! Настаиваю на совместных прогулках, либо на их общении у нас дома, я не вмешиваюсь в их диалог, ухожу в другую комнату). Еще в своем иске он требует определить порядок общения с дочерью (3 раза в неделю, единолично). У меня такой вопрос: ведь порядок общения с ребенком устанавливают, если ребенок проживает ОТДЕЛЬНО от родителя, подавшего иск? Но мы с бывшим мужем официально до сих пор проживаем вместе (он прописан, выписываться не собирается, квартира находится в нашей с ним общей совместной собственности, разменивать и разъезжаться мы не собираемся), единственное, что он временно снял квартиру, чтобы поселить туда любовницу и ее дочку, и сейчас тоже живет на этой съемной квартире. Но приходит и к нам, в любое время, открывает дверь своим ключом, ест тут, пьет, проводит, сколько угодно времени, может видеть дочку, когда угодно. Т.е., официально, его место жительства - в одной квартире с дочерью. Вправе ли он тогда подать иск на порядок общения с ребенком, ведь ребенок, официально, отдельно от него не проживает, мы прописаны все вместе в одной квартире?