¿Por qué mi marido ha perdido el deseo sexual hacia mi? ¿Es por nuestras continuas discosiones?

Hola. No sé si me podrás ayudar, mi problema es el siguiente. Llevo casada casi cuatro años, pero llevamos juntos en total 15 años. Siempre nos hemos querido muchísimo, nos hemos abrazado mucho, nos hemos dicho te quiero toda la vida, pero desde poco después de casarnos nuestras relaciones sexuales empezaron a decaer, no en calidad sino en cantidad. Cada vez han sido más espaciadas y yo he reclamado siempre a mi marido y él lo achacaba a que estaba muy cansado, estresado y demás.
Es cierto que desde que nos casamos nos han pasado muchas cosas, hemos tenido muy mala suerte en negoccios, trabajos, yo no conseguía quedarme embarazada, ni aún haciendo tratamientos... En fin, que lo hemos pasado muy mal.
Lejos de separarnos, todas esas cosas nos han unido mucho. Pero siempre hemos discutido, no mucho, pero sí muy mal. Quiero decir, nos hemos gritado mucho, nos hemos hecho mucho daño verbalmente, sobre todo yo a él, y yo no me daba cuenta de cuánto daño le estaba haciendo.
Hace poco me confesó que me quiere muchísimo, que él no se ve con otra persona pasando su vida, que no me está engañando con otra ni lo ha hecho nunca, pero que ha perdido la pasión o el deseo sexual conmigo.
Para mí ha sido horrible, me encuentro fatal, no tengo fuerzas, me está consumiendo y no puedo más. Tengo la autoestima por los suelos. Sé que siempre he gustado bastante a los hombres, lo noto en cómo me miran por la calle, pero a mí me importa él y ahora me veo fea, gorda, no quiero que me vea desnuda, que me mire, aunque no lo hace, pero no quiero que vea lo fea que me veo yo.
Hemos empezado a ir a una psicoterapeuta, llevamos muy pocos días pero no sé si nos podrá ayudar.
El no sabe por qué le ha psado esto, ni sabe decir desde que momento pero nos está haciendo pasar mucho dolor, la tristeza en casa es tremenda, nos queremos mucho, yo he propuesto marcharme pero él no quiere, dice que no quiere que nos separemos, que sigamos yendo a la psicóloga.
Lo que hemos conseguido es tener los dos una depresión enorme, estamos los dos con un tratamiento.
No sé si todo ha sido por las discusiones que hemos tenido, la verdad es que el primer año fue horrible, no parábamos de discutir, pensamos que era hasta que nos adaptáramos y así fue, luego todo fue bien, pero no sabemos discutir, sobre todo yo, y a él nuestras discusiones le han hecho mucho daño. ¿Crees qué su falta de deseo hacia mi puede deberse a eso? ¿Crees qué se puede arreglar? Muchas gracias