¿Sufrí abusos de peque y me afecta ahora?

No sé si esta pregunta debería de ir aquí, porque tiene un poco de todo, de sexualidad y de problemas psicológicos. Pero ya es demasiado difícil escribirlo como para pensarlo.
Cuando era pequeña, alrededor de los 5 años, mi hermano mayor abusaba de mi, en muchas ocasiones, me engañaba dándome juguetes y demás para que no se lo contara a mis padres. Mi otro hermano también lo intentó una vez, pero al no conseguirlo no se repitió. Jamás se lo había contado a nadie, solo a una persona de fuera de mi familia y no me creyó. Con los años yo intentaba no tener relación familiar con mi hermano y cada vez que le hacía saber que me acordaba de todo lo ocurrido me respondía de forma agresiva, llegando a amenazarme con matarme. A lo largo de los años me he ido alejando de el y dejando correr el tema. Llegué a contárselo a mi madre, primero no lo creía, luego la hice ver cosas que pasaban cuando eramos pequeños que para ella no tenían sentido y con la explicación que yo le daba ahora si la tenia. Pero hace como que no pasa nada, nos trata a todos de la misma manera como si aquella conversación que tuvimos hubiera sido una pesadilla y no fuera real.
Con el paso del tiempo vuelvo a revivir la misma situación de la mano de un primo con el que tengo mucha relación pero ya no soy una niña, tendría alrededor de los 17 o 18 años, y nuevamente no dije nada porque pensé que iría drogado y que no sabría lo que había hecho, ¿qué pasa conmigo? ¿Qué hago para que siempre me pase lo mismo? Dejo correr el tiempo y cuando creía que estaba en lo cierto, que no sabía nada, vuelve a ocurrir y esta vez llega a más. Desde entonces no he vuelto a tener la relación que teníamos siempre, no he estado a solas nunca más con el. Pero hace unos días me pidió disculpas por todo lo que me hizo, no entiendo a que viene eso ahora, cuando pasó hace unos 4 o 5 años.
Yo siempre he sido muy fría y nunca he creído que me hubiera afectado todo esto que me pasó, porque además he tenido problemas de salud, que me han apartado de ir al colegio de forma normal, de poder jugar con niños, de tener relaciones con gente de mi edad debido también a una sobreprotección desmesurada de mi padre. Por lo que mi infancia no ha sido para nada normal, me convertí en una persona demasiado tajante con mis pensamientos, demasiado fría y muchas veces, poco sociable.
Con el tiempo, mi enfermedad se estabilizó y pude empezar a hacer una vida medio normal, mi forma de ser cambio por completo llegando a ser muy extrovertida y dicharachera, y hace ya 2 años y medio que tengo pareja, y lo es todo para mi. Mi problema sexual llega cuando después de unos 6 meses de estar con el, dejo de tener ganas de hacer el amor con el. No puede entender que me pasa, y yo no puedo ayudarle porque no sé que es lo que me pasa. ¿Pueden ustedes ayudarme? Sé que debería de ir a un psicólogo pero no puedo permitírmelo y creo que la cosa ya es urgente.
Pido disculpas por entenderme tanto con mi historia.