Dos pagadores

Buenas tardes: ¿Por qué se penaliza haber tenido dos pagadores en el año fiscal? Me han despedido en Julio de 2009 y tengo como pagadores a la empresa y a la Seguridad social y me sale a pagar bastante. Muchas gracias