Mi novio es seis años mayor que yo y me dice que tiene muchas dudas, ¿Cómo encauzar la relación?

Hola Buenos días!
Voy a comentar mi caso, a ver si me pueden ayudar. LLevaba 4 meses con un chico saliendo, nos llevamos 6 años y la relación se ha roto. Él estaba muy ilusionado conmigo, pero yo soy muy pasota. Él decía que me intentaba besar y yo le giraba la mano, hacía planes de futuro conmigo pero yo no podía y no tenía muchas ganas. Él me lo comentó y yo intenté cambiar. Resulta que dice, que se le ha ido la ilusión, que ya no siente las cosas como antes y que no me quiere engañar. Que tiene dudas de nuestro futuro. Me alegro de su sinceridad. Esta última semana me ha intentado evitar, y yo a toda costa, he intentado quedar con él. Le dí un últimatum y le dije que o ponía de su parte o se acababa todo. A los dos días, volvimos a quedar y él me dijo que seguía pensando igual, y me dijo que sí la situación era seguir igual. Yo le dije, que ya no había solución. Yo no puedo esperar a que se le aclaren las dudas. Total, al final estuvimos 4 horas hablando, y me dijo que iría a los sitios que estuviera yo, que mantuviéramos contacto por msm y demás. Le dije que era imposible lo nuestro, y él se enjuagó las lágrimas. Al despedirse, no se quería ir. Me dijo, que a lo mejor, dentro de 3 semanas insistía por mi y que sí yo le iba a contestar. Le dije que por supuesto.
Me da rabia, porque yo sé que me quiere y yo también lo quiero a él. Pero yo no puedo estar así, esperando a que se le pasen las dudas. Aunque es cierto, que me preocupa, porque se quedó un poco mal.
¿Qué debo de hacer?, ¿Qué le pasa a él por la cabeza?
Muchas gracias