Liberación de Hipoteca

Tengo una propiedad habitacional que he pagado desde hace 2 años, el préstamo para comprar lo obtuve con un particular no un banco, tengo las escrituras a mi nombre, pero por desconocimiento no había realizado el trámite de liberación de la hipoteca, sin embargo la persona a la que le pagué hace 2 años, no me quiere firmar la carta para liberar la hipoteca por otras cuestiones personales ajenas a la deuda que más adelante lo explicaré. ¿Que puedo hacer al respecto?

Las cuestiones personales son las siguientes: esta persona se dedica a prestar dinero a otras con su respectivo interés pidiendo como garantía algún bien, hasta ahora no había tenido problemas con esta persona la cual conocí por recomendación de alguno de mis familiares que ya habían solicitado prestamos con esta persona, el argumento es que como alguno de mis familiares no le ha pagado no me firmaría la carta de liberación, entiendo que es una forma de presionar a mi familiar pero no creo que este en lo correcto, le comento que el pagaré que le firmé ya fué cancelado, adicionalmente tengo los comprobantes de los pagos que realicé al banco.