¿Cómo retirar un aval tras un divorcio?

Hola, hace un año me he divorciado, quiero retirarme de la hipoteca y sacar a mi padre que en su día se puso de aval, ya que el piso se lo ha quedado mi ex, y como no es una buena persona, no me fio de que un día deje de pagar la letra y el banco vaya a por mi o a por mi padre.que por otra parte, si el piso me lo quedase yo o mi padre, ni tan mal, pero me han dicho que entraría a subasta o algo así. Tenemos un niño en común de 5 años, por si sirve el dato.No se que puedo hacer, porque ademas mi padre me esta dando guerra con el tema. ¿Pueden ayudarme? Gracias