Каким образом я могу отказаться от заключения этого договора?

В соотвествии с положением ст. 329 ГК РФ задаток отнесён к обеспечению способа исполнения основного обязательства. Той же нормой установлено, что недействительность основного обязательства влечет недействительность обеспечивающего его обязательства, если иное не установлено законом.

По Вашим словам догвоор купли-продажи с покупателем Вы не заключали, следовательно все согласования были в устной форме.

Статьей 160 ГК РФ "Письменная форма сделки" установлено:

1. Сделка в письменной форме должна быть совершена путем составления документа, выражающего ее содержание и подписанного лицом или лицами, совершающими сделку, или должным образом уполномоченными ими лицами.

Двусторонние (многосторонние) сделки могут совершаться способами, установленными пунктами 2 и 3 статьи 434 настоящего Кодекса.

Законом, иными правовыми актами и соглашением сторон могут устанавливаться дополнительные требования, которым должна соответствовать форма сделки (совершение на бланке определенной формы, скрепление печатью и т.п.), и предусматриваться последствия несоблюдения этих требований. Если такие последствия не предусмотрены, применяются последствия несоблюдения простой письменной формы сделки (пункт 1 статьи 162).

Статьёй 162 ГК РФ "Последствия несоблюдения простой письменной формы сделки" предусотрено:

В случаях, прямо указанных в законе или в соглашении сторон, несоблюдение простой письменной формы сделки влечет ее недействительность.

Статьёй 549 ГК РФ "Договор продажи недвижимости" предусотрено:

1. По договору купли-продажи недвижимого имущества (договору продажи недвижимости) продавец обязуется передать в собственность покупателя земельный участок, здание, сооружение, КВАРТИРУ или другое недвижимое имущество (статья 130).

Статьёй 550 ГК РФ "Форма договора продажи недвижимости" предусотрено:

Договор продажи недвижимости заключается в ПИСЬМЕННОЙ форме путем составления одного документа, подписанного сторонами (пункт 2 статьи 434).

Несоблюдение формы договора продажи недвижимости влечет его НЕДЕЙСТВИТЕЛЬНОСТЬ.

Вывод, согласшение о задатке, подписанное Вами является не законным, посокольку основное обязательство (договор купли-продажи) является недействительным.

Так что вы правы, а Ваши господа Вам морочат голову

С уважением,

В.В. Татауров