Возможные последствия для продавца, если он не возвращает задаток после отказа покупателя от сделки

Если покупатель внес задаток за квартиру, согласно составленного соглашения, а потом отказался от сделки. Если я,не верну задаток, согласно соглашения и начну искать другого покупателя на квартиру. Я этим ничего не нарушаю. Если тот покупатель подаст на меня в суд-он выиграет его? По соглашения я имею право при отказе от сделки не возвращать задаток, Суд сможет в этом случае найти какую заковырку.