¿Soy controladora?

Varias veces pregunte en esta pagina, porque ya no tengo amigos, solo dos amigas que están muy ocupadas y no puedo siempre hablarles de todos mis problemas, por eso pregunto aquí.

Mi novio quiere juntarse con las compañeras y compañeros de la primaria y yo no quiero que se junte, no es de mala, sino que hay una historia atrás de todo esto, al principio confié a pleno, y me hizo desconfiar porque hablaba de temas sexuales con amigas, tiraba frases como "que sexy" a amigas, le había permitido hablar con la ex y terminaron recordando como hacían sexo (en la conversación). Ahora todo se calmo y supuestame cambio, solo pasaron meses, aun no paso un año de cambio, y de la nada aparece una ex compañera de primaria de él, que quiere reunir a todos, etc y el quiere ir y me dice que confié y el anteriormente me prometió que ya no volvería a meter dedo en el pasado y yo ya no quiero que me lastime de nuevo, no quiero que vaya, lo amo y me gusta y quiero estar bien y no mal pero tampoco quiero ser mala, pero me trae recuerdos, se que dirán que vaya a un psicólogo, pero no conozco uno y a mis padres les parece una locura mandarme a uno, por eso escribo aquí, lo aclaro porque siempre me responden que tengo que ir a uno.

Entonces, ¿esta mal que le diga que no quiero? Me siento controladora pero realmente tengo miedo, gracias.