Vinculación Asociación de propietarios TerrenoUrbanizable

Soy propietario de un terreno en una zona Urbanizable de Andalucía pero aún no existe ningún PAU, con lo cual tampoco existe Junta de Compensación, el camino de acceso a la finca lo gestiona una Asociación de Propietarios a la cual no pertenezco. Recientemente han hormigonado el camino y me reclaman los gastos de adelantamiento, más las cuotas de comunidad, me consta que a otros vecinos e incluso por vía judicial. Por supuesto el arreglo del camino se ha realizado sin ninguna licencia, ni dirección técnica, es decir, ilegalmente. Estoy obligado al pago de lo que me reclaman, ¿aunque involuntariamente me beneficie dicho arreglo?