La verdad es que no, no tienes el menor derecho a tener celos, aunque si estas enamorada es lo mas normal que te pase, pero derecho, ninguno.
Por otro lado, también es de lo mas lógico que si el quiere tener mas hijos los tenga con su mujer, y por muy duro que te resulte, lo que seria rarísimo, es que con quien quisiese tener alguno fuese contigo. Eso llegado el momento le podría suponer perder a su familia definitivamente... hazte a la idea de una vez, de que tu eres la otra... solo eso, y siento si te duele leerlo, pero te soy sincero.
Como te dice belladorita, aun con dolor deberías de plantearte el dejarlo visto que esta claro que nunca llegaras a mas salvo que su mujer os descubra, y en ese caso solo se iría con el premio de consolación por no estar solo, es decir, "Tú". Esa relación solo te hace daño y primero eres tu...
Suerte...