Проблемы с использованием земельного участка - наложение штрафов и угроза отобрания. Что делать дальше?

Рассказываю свою проблему, с которой столкнулась сегодня. В моей собственности находится земельный участок в черте города. На нем находился жилой дом в ветхом состоянии. В 2012 году мы снесли этот дом и он был снят с регистрационного учета. В последующие годы мы пытались продать земельный участок, но как-то безуспешно. В результате, осенью 2015 года решили, что построим там баньку и площадку для отдыха. Расчистили место, вырубили старые деревья. С одной стороны наш земельный участок не огорожен забором, и никогда там его не было, даже до того, как мы его купили. На прошлой неделе мне пришло уведомление из отдела административно-технического контроля администрации района о проведении внеплановой проверки на основании обращения моей соседки (якобы мы захватили ее территорию, как раз с ее стороны и нет забора). Два дня назад эту проверку выполнили, никаких нарушений не было выявлено. Вчера пришло уведомление из отдела управления Федеральной службы государственной регистрации, кадастра и картографии о выполнении такой же проверки по той же причине. Сегодня выполняя проверку, мне указали, что нарушений по причине захвата территории не выявлено, но указали, что мне будет наложен административный штраф в размере 20000 в связи с тем, что у меня на участке нет жилой застройки и не ведутся никакие строительные работы. Разрешение на строительство я не оформляла. Посчитали, как будем к этому готовы, так и будем оформлять. Также мне сказали, что вправе отобрать у меня участок за неиспользование. Я ничего не понимаю. Эта земля у меня в собственности, я регулярно плачу налоги. Почему такие штрафы? КАк мне дальше быть?