Mover la verja de un jardín, en terreno agrícola

Hola expertos. Tengo una casa en el campo antigua con un jardín pequeño dentro de un terreno agrícola de mi propiedad. Me gustaría agrandar el jardín. La casa está registrada y también en el catastro, al igual que el terreno agrícola, en Castilla la Mancha.
No sé si puedo mover la verja directamente o si pido permiso no me lo va a permitir el ayuntamiento.
La parcela agrícola tiene varias hectáreas.
Supongo que en el catastro debería ajustar los cambios de superficie destinada a agricultura y la superficie destinada a vivienda.
¿Qué más pasos debería dar? ¿Tengo que pedir permisos en el ayuntamiento? Me podrían pegas?
Os agradezco vuestra ayuda.