¿Estaría exento de pagar los impuestos por la veta de mi vivienda habitual si reinvierto el dinero?

os explico mi caso: yo compre un piso en el año 2000 en el cual llevo ya mas de 5 años viviendo y por lo cual se considera mi vivienda habitual, ahora lo estoy vendiendo y quiero emplear el dinero de la venta: una parte iría para pagar y liquidar el resto de hipoteca del piso que quiero vender (mi vivienda habitual)

y el resto del dinero lo quiero emplear en pagar parte de la hipoteca de un segundo piso que compre en el año 2005

este segundo piso pasaría a ser a partir de ahora mi vivienda habitual,

pero he preguntado en hacienda y el señor que me atendió, me dice que si ya hace mas de dos años que compre el segundo piso (el que a partir de ahora pasaría a ser mi vivienda habitual) que ya no tendría derecho a la excepción del pago de impuestos, que para eso tendría que comprar el piso ahora o durante los dos años siguientes a la venta de mi vivienda habitual.

y yo tengo dudas si esto es así o no???,

os agradecería que me aclaréis mis dudas, gracias de antemano.