Que puedo hacer si se me sede un terreno para edificar, y luego se me quiere desalojar?

Hace tres años la tía abuela de mi esposo nos permitió edificar en el fondo de su casa.

Todo marchaba bien hasta que ella se consiguió una relación amorosas hace un año atrás; cuando nos instalamos hicimos la casa de cero. Y ahora "ellas"quieren que desalojemos para poder alquilar la vivienda que nosotros levantamos. El problema es que ahora tenemos una niña pequeña (la cual buscamos porque estaba todo bien) y que invertimos mucho esfuerzo y dinero para poder tener una vivienda habitable, en lo que ahorramos para comprar algo propio... ¿Nosotros qué podríamos hacer de punto de vista juridico? ¿Tenemos algún derecho al dinero que de invirtió? Por favor si me pueden responder se los agradezco ya que es una situación muy difícil y triste dado a que nos sentimos usado porque la misma dueña nos incentivo a construir la casa y ahora que esta finalizada nos quiere desalojar.