¿Abandono del puesto de trabajo?

Mi jefe no pactó con nosotras ningún tipo de calendario laboral (no quiere hacerlo ningún año para ahorrarse lo del cómputo de horas anuales y para que no cojamos ningún puente ni nada por el estilo, de hecho no tenemos ninguno nunca). Llegó agosto y cogimos todo el mes de vaacaciones,(en teoría, porque nos hizo ir uno o dos días a la semana a trabajar) .Ahora nos pretende pagar las horas que hemos ido en agosto como horas extra normales y ha llegado a decir que lo que hemos hecho al coger el mes de vacaciones es abandono del puesto de trabajo.
Le agradecería que nos aclarara si esto es así o no, y si es mejor que nos pague las horas como él quiere o que nos cojamos algún puente próximo.
Además aún nos debe la paga de la pasada Navidad. En la empresa somos 2 trabajadoras administrativas, incluidas en el convenio del metal.