Necesito de sus opiniones, ya que no cuento a quien confiar

Tengo novio hace 2 años, ya hemos presentado a nuestras familias. Ya somos grandes, tenemos 35. Cada uno vivo solo, por separado. El tema es que veo que mi novio no es comunicativo, nunca hablamos de ir a vivir juntos y ayer le pregunte si le gustaría tener hijos y me dice algún día. No veo que tenga demasiado interés en eso. No es que yo los quiera tener ya, pero con mi edad, no puedo esperar demasiado, creo que deberíamos y pensando que hacer, no tenemos 25 años.  Hoy me levanté mal, y se me pusieron cosas en la cabeza como que esta conmigo para no estar solo, o para tener sexo y que me presento a su familia porque su madre siempre le decía cuando vas a traer a alguien (él mismo me contó esto).Mi novio nunca tuvo novio formal antes.
Por otro lado, una vez por mes sale con su primo solo (el primo tiene pareja, vive con ella y tiene un bebé salen a cenar solos. Yo me pregunto la mujer del primo no le molesta?dejar que su pareja vaya a cenar con su primo y ella quedarse sola con el bebé.. no se a mi me molestaría. Antes de conocerme mi novio me contó que todos los años se iba de vacaciones con ellos, cosa que también lo veo mal, porque dejaría que la pareja vaya sola y no estar metido en el medio. Para mi esto es extraño o no quiere dejar su vida anterior. El viernes me dejo sola a la noche para irse a cenar solo con el primo. Y doy fe que sale con él porque he visto los mensajes del primo invitandolo. 
No se que hacer, porque siento que no avanzamos en la relación, ya somos grandes y él sigue haciendo cosas de salir con primo como cuando se tiene 20.
Qué opinan? Ayer "intenté" hablar lo de los hijos, pero me contesto lo que comenté arriba y nada más. No se como encarar los temas con él y me estoy desesperando porque me estoy dando cuenta que no avanzamos en nada. Yo no quiero esperar tanto por mi edad, no tendría problema si tendria 10 años menos, pero a mi edad creo que ya tendríamos que ir pensando que hacer.