Fianza de Alquiler

Mi consulta es la siguiente, vivo en un piso en alquiler, al cual por un cambio involuntario en mi situación laboral, por parte de la empresa, me veo imposibilitado de hacer frente al pago del arriendo actual. Avisé con 30 días de antelación, conforme me dijo el arrendador, de que dejaría la vivienda, para no causar ningún prejuicio por mis problemas económicos. Por mis experiencias anteriores como inquilino, deduzco que ya me puedo ir despidiendo de la fianza, como otras veces; ya que el arrendador siempre alega cualquier motivo para no devolverla. Y como es su demanda subjetiva contra mi palabra. Me ha dicho, que tiene que ver el piso, para valorar la devolución o no de la fianza o parte de ella. Como sé que podrá inclusive decirme, que ha visto una mota de polvo en el suelo u otras cosas...
La cuestión es, ¿siempre hay esa indefensión por parte del inquilino ante esas situaciones?