Relación con el ex de mi prima

Buenas, tengo una situación ... después de muchos años de mi prima haber terminado si relación con su ex, el y yo nos encontramos por las redes sociales y comenzamos a tratarnos ya que una vez nos vimos en persona, con el tiempo nos gustamos y ahora estamos enamorados. Me da miedo lo que pueda pensar la familia y que se pongan en contra ya que el tuvo un pasado con ella... que hacer??? Ella esta casada con otro ya y tiene hijos con su actual pareja.