¿Es posible recuperar la entrada de una vivienda?

He dado la entrada de una vivienda, a cuanta de futuras arras o formalización de compraventa antes de final de mes. Mi intención era utilizar la vivienda, pero tener la posibilidad de alquilarla si me hacia falta.

2 días después de dar la entrada, descubro que hay vecinos que se oponen frontalmente a que viva gente arrendada en el edificio y que incluso parece que hubo alguna reunión de escalera en la que acordaron que no se podía alquilar. Parece ser que las actas de reunión indican lo contrario pero la intención está ahí. Hay alguna posibilidad de recuperar la entrada? Yo manifesté que existía la posibilidad de que la quisiera alquilar, pero no tengo nada por escrito.

Gracias,