¿Hay qué devolver el dinero desgravado por una vivienda para poder desgravar otra?

El año pasado cambie de domicilio y quiero desgravar la nueva hipoteca. Aun sigo pagando la anterior, pero ya no es mi vivienda habitual. Me comentaron en Hacienda, que no puedo desgravarme la nueva hipoteca hasta que no devuelva lo desgravado por la anterior. Mi pregunta es: Si solo es un cambio de hipoteca, dejándome de desgravar obviamente la antigua, por que no se puede? También me comentaron, que para poder desgravarme la hipoteca nueva, tengo que dejar de desgravarme la vivienda antigua durante los años que lo he estado haciendo. Por ejemplo, si he desgravado esa hipoteca 5 años, tengo que estar otros 5 sin desgravarme ninguna vivienda, para "devolver" lo que se me ha devuelto por deducción de vivienda habitual. ¿Es eso cierto?