Отказ покупателя от сделки - как защитить свои интересы и отказаться выплачивать 20 тыс. на законных основаниях

Выставили на продажу с напарницей совместную недвижимость в Сочи. Сами живем в Москве, а покупатель нашелся из Екатеринбурга. На вопрос видел ли покупатель недвижимость он ответил: Отдыхали летом в тех местах и мы проходили мимо. В виду удаленности друг от друга, все договоренности достигли путем устного общения по телефону и интернет-переписке. Никаких предварительных письменных договоров нет. Мы предложили покупателю выслать нам 20 тыс. рублей на банковскую карту на расходы на дорогу и др. затраты для оформления данной сделки (доверенность, справки, которые действительны макс. Месяц). Все недостающие документы сделали по срочному тарифу, т.е. фактически все наши затраты составили сумму около 20 тыс. В случае успеха сделки эта сумма должна была расцениваться в счет оплаты недвижимости. Но приехав на место представитель покупателя отказался подписать договор купли-продажи (есть свидетели их отказа). Затем авиатранспортом вылетел сам покупатель и тоже отказался от сделки. Сейчас же требует возврата 20 тыс и возмещение ему авиабилетов, оценки (какой-то) нашей недвижимости, доверенность для своего представителя и дорогу представителю. Сумма его претензии составила 55 тыс. не считая 20 тыс. аванса, что он нам заплатил. Что делать? Можем ли мы отказаться выплачивать 20 тыс. на законных основаниях? Ведь мы фактически их потратили на обеспечение свершения сделки с нашей стороны, никакой выгоды мы не извлекли из этих денег, а несостоявшийся покупатель настаивает на незаконном обогащении с нашей стороны.