Irpf en dietas

Hola. Vivo en Barcelona. Llevo unos meses desplazado en Guipúzcoa. Empece en un hotel (pagado por empresa y cobrando dietas).

Y ya harto de ello pedí piso de alquiler. Ahora con el piso alquilado por la empresa. Me dicen que las dietas tienen retención de irpf. A no ser que el alquiler del piso esté a mi nombre. Y yo pueda justificar el alojamiento.

Esto supone renunciar a lo pactado oralmente para el desplazamiento.

¿Es correcto lo que me dicen?¿Si es así, puedo negarme a seguir desplazado?