Duda sobre Responsabilidad infracción urbanística

Estoy buscando comprar un terreno rústico, he visto uno que tiene una construcción, lógicamente ilegal. Me planteo lo siguiente, si la compró y al cabo de un año inician un procedimiento sancionador... Contra quién iría el procedimiento, he leído que los responsables son los promotores, constructores y técnicos responsables de la ejecución... Por ese orden. En esta situación yo no sería ninguna de esas tres personas, no sé si lo entiendo bien... Yo no he promovido la obra (lo hizo el anterior dueño), ni la he construido ni soy el técnico. El terreno estaría en Extremadura.