Muro chalet pareado

Hola buenas tardes, vivo en una urbanización, compuesta de chalets pareados.Sin meterme en el terreno de mi vecino, he construido un muro de 1m.90cms, que delimita su casa con la mía. Este vecino acaba de llegar de Alemania de pasar el verano, y al ver el muro construido dice que me va a denunciar porque no le gusta el muro.Yo le he dicho que me falta enlucirle el muro por la parte de su casa, y quería pedirle permiso porque no quería entrar a su casa sin su permiso para acabar la obra. ¿Me podrían obligar a derribar el muro que da a su parte? Muchas gracias.