Que semáforo obedece en carril prioritario un coche

Mi duda concierne en lo siguiente:

Vamos conduciendo -coche privado- por una calle hay dos carriles "normales" y un carril bus (en general a la derecha) y al llegar a un cruce y hay dos semáforos, uno "normal" y otro con sólo dos luces para el carril bus (uno con una raya horizontal y el otro con una raya vertical).

Sabemos pertinentemente que otros vehículos utilizan el "carril bus", pues ¿a cuál semáforo deben obedecer? -Lo pregunto porque casi me la pego con uno de éstos que utilizó éste carril por la derecha para adelantar la fila... Estando el semáforo "normal" en luz verde y el de la derecha en raya horizontal