¿Nos pueden cambiar el turno solo a una parte de los trabajadores?

Trabajo en una fabrica y trabajamos por turnos, en la misma sección somos 7 trabajadores y desde hace tiempo 4 de ellos hacen siempre el turno de mañana(son de fuera a unos 40km) y los otros 3 vamos rotando mañana, tarde, hasta ahí lo íbamos llevando. Ayer nos dicen que nos van ha quitar el turno de mañana(porque no hay suficiente trabajo)pero solo nos lo van ha quitar a nosotros 3 nos dicen que vamos ha hacer tarde-noche y los otros 4 van ha seguir de mañana ¿nos pueden hacer eso? ¿Deberíamos rotar todos? ¿Qué solución tenemos aparte de denunciar?