O Class_Men e Junior180 estão certos.

Escolha um momento tranquilo para falar com ele.
Descreva o ocorrido

de forma objetiva, sem tom acusatório ou com ironia, e diga como se sentiu. Reforce a importância da cumplicidade entre vocês e observe a reação dele.

Pode ser só um caso de uma amizade ruim. Alguns homens tem amigos sem noção mesmo e não são iguais a eles. Se for, pode dizer que se sentiria melhor se ele não tivesse mais contatos do tipo. Falando de modo geral, os mais honrosos que já conheci não toleram atitudes assim e procuram se manter perto de quem mantém os mesmos valores e/ou é superior.

No final, é uma decisão sua de escolher o que deseja, mas precisa avaliar o relacionamento inteiro de forma justa.