Что делать, если покупатель требует компенсации за улучшения взятого в аванс дома?

Покупатель внес аванс по договору имеющему признаки предварительного договора. Пользуясь моей добротой и глупостью заехал в дом и завез мебель, переделал некоторые конструкции. В срок на сделку не вышел. На уведомления о выходе на сделку или выселении не реагировал. Через полгода я принудительно выселил его. Он подал в суд иск, о том что он внес неотделимые улучшения, и теперь я должен ему компенсировать их стоимость (цифра заоблачная) или снизить стоимость дома, до размера аванса, поскольку улучшения приближаются к стоимости договора. Схема практически рейдерская. Как с ним бороться?