Quien paga la plusvalía

Hola Pedro, mi pregunta es la siguiente:
Hace un par de años (2007) vendí unas viviendas y ahora el ayuntamiento me reclama la plusvalía, que ya se que por ley la pago yo, pero a la hora de hacer las escritura se pactó de mutua acuerdo que la plusvalía la pagaría el comprador, se puso así por recomendación del notario, precisamente para evitar estos problemas.
Por lo que yo sé, la ley dice que la paga el vendedor salvo pacto en contrario, y este pacto está recogido en un documento público
¿Hay alguna manera de reclamar al comprador este importe?, ¿Es viable?
Gracias