Cuestión de subarrendamiento

Alquilo un piso desde hace 3 años, en el contrato del cual consta que no puedo subarrendar total o parcialmente, y a su vez especifica que otras dos personas vivirán en el inmueble, de las que consta el nombre.
El hecho es que por cuestiones personales esas dos personas dejaron el piso, y en su lugar han entrado mi novia y un amigo. En ningún momento consideré oportuno notificarlo al propietario, dado que son personas cercanas a mi que nunca entendí como "subarrendatarios". Pero temo que esta situación pueda ser considerada subarrendamiento.
Puede el propietario considerarla tal, teniendo en cuenta que el contrato contempla que viven dos personas más en el piso, ¿aunque no sean las mismas?
Si así fuera, ¿podría el propietario ejecutar el aval bancario (es a primer requerimiento y sin necesidad de justificar impago...) a la vez que cesar el contrato? ¿O sólo se puede ejecutar en casos de impago?
Gracias por vuestro tiempo.