А может есть какой то другой способ вернуть деньги?

Выход из сложившейся ситуации. Мы решили переехать в Пензенскую область, присмотрели дом с участком по устной договоренности определили стоимость дома с продавцом, оговорили срок сделки до 1.10.2009 года и на основании расписки передали им 100 000 рублей. Расписку написала жена продавца дома 11.08.,2009 года (расписка не удостоверялась нотариусом) и обозначили передаваемую сумму как предоплату по договору купли продажи дома. Вернувшись домой мы стали готовиться к отъезду, но к несчастью парализовало мою маму и мы осознали, что в сложившемся положении дел мы не сможем осуществить переезд. Уведомив по телефону продавца о том, что мы не будем покупать дом мы все подробно объяснили им и попросили вернуть деньги на что получили отказ в грубой форме. По мнению продавца эта сумма является для нас "штрафом" за отказ от сделки. Могу ли я подать исковое заявление о возврате суммы по своему месту жительства, так как поехать в Пензенскую область теперь физически не могу? А может есть какой то другой способ вернуть деньги?