Tout dépend de votre accord avec le vendeur. La signature d’un compromis de vente n'emporte pas, en tant que telle, obligation pour le bénéficiaire de verser une somme d'argent (dépôt de garantie).
Cependant, le vendeur va certainement exiger ce versement qui permettra, en cas de désistement de votre part, de le dédommager pour l’immobilisation de son bien (hors rétractation et non levée des conditions suspensives).