No creo que sea para tanto.
Si yo fuera ese amigo no me molestaria ese tipo de comentarios en broma (siempre y cuando no sea a cada rato y a cada dia), a menos que me gustaras y no quisiera que tu pensaras que me gusta alguien mas cuando serias tu la que me gusta, tambien puede ser simplemente una amistad hipocrita y en secreto no te soporta, o no tiene sentido del humor, claro que lo mejor seria preguntarle a el directamente que cual es su problema contigo.