Devolución de fianza de alquiler

Buenas tardes,
Acabamos de cambiarnos de piso. Hemos llamado a nuestro antiguo propietario un mes antes de irnos y según el, no había problema y no hacía falta ponerlo por escrito, que sólo lo iba a tener en cuenta. Hemos limpiado el piso completamente y lo único que queda son 3 o 4 agujeros de cuadros que si hace falta los tapo yo... Pero lo que no entiendo ahora es que mi ex propietario me está diciendo que quiere preguntar un presupuesto para una limpieza y para pintar las paredes (que no están sucias)! Mi pregunta es: a partir de que punto y según que criterios un propietario puede descontar de la fianza estos gastos que quiere hacer cuando yo creo que el piso está perfecto de estado (que es lo que pone el contrato) y listo para volver a poner en alquiler. Además hemos tomado fotos que pueden testificar del estado del piso...
¿Y qué podemos hacer para que nos la devuelva si se empaña en decir que no quiere sin más argumento que este presupuesto que decimos que no hace falta?
Muchas gracias por su ayuda,
Saludos