Как изменить график общения ребенка с бабушками в новой семье в свете попыток влияния на него против родителя?

Ситуация такова: развелся с супругой ребенок проживает со мной в новой семье, мать лишена родительских прав и отбывает наказание по ст. 228 УК РФ. Бабушки подали исковое заявление на определение графика общения с внуком, в котором просят все свободное от учебы время он будет проводить с ними. То есть это все выходные и все каникулы. Получается дома он будет находиться только когда будет учеба. Подскажите что сделать чтоб определить другой график общения и только в присутствии меня, т.к. они пытаются настроить моего сына против меня.