Tengo un contrato de 40 horas y hago 154 al mes, ¿Pueden reclamarme los 3 últimos años?

Buenas tardes, tengo una situación un tanto insólita, os comento, tengo un contrato por obra y servicio y voy a hacer 3 años dentro de una semana, este es de 40 horas semanales y yo voy rotando una semana 35 y otra semana 42, y así... Entonces ahora para cerrar el contrato quieren echar cuentas de las horas que les debo de estos 3 años y restarlo de mi liquidación... ¿es esto legal?, en el contrato no dice nada de el horario especial que tenia que llevar, simplemente 40h de lunes a sábado.