¿Decir te quiero en la primera vez con tu pareja?

Llevo poco más de un mes con mi enamorado, lo intentamos después de muchos problemas con él porque yo siempre quise una relación estable  y él solo quería algo casual, al final él me pidió intentar una relación, y despúes de un tiempo hemos tenido nuestro primer encuentro sexual, lo extraño para mí es que yo era virgen, él no, yo siempre creí que sería yo la que podría decir un te quiero o algo más romántico en ese momento, pero mientras lo hacíamos, él fue quien lo dijo, y por el momento no recuerdo si le respondí o no, Lo quiero mucho, y él me confunde, porque es tierno a veces, como en ese momento, y muy frío, como cuando caminamos en la calle y ni siquiera me da la mano... ¿opiniones?