Script que borre archivos específicos de una carpeta

Necesito crear un script que borre automáticamente y sin preguntar todos los archivos de 11 directorios que no coincidan con un nombre especifico.

Es decir:

Tengo 11 carpetas... N1, N2, N3... N11. Cada carpeta contiene un solo archivo llamado Archivo N1, Archivo N2... Archivo N11, respectivamente.

Quisiera que los archivos únicos se conservaran y que si existen otros archivos que no coincidad con ese nombre se borraran.