Мой сын и его друг, мне нужны мнения

Сыну 11 лет, есть друг, дружат 4 года, вместе ходят на спорт. Три года это были друзья не разлей вода, в этом году друг видимо повзрослел, у него появились новые друзья, он начал вести более агрессивно, толкаться, обзываться. Но все равно они плотно общались, гуляли. В последнее время друг начал вполне конкретно обзывать моего сына, типа ты чмо, та закрой рот, пнх, ипанутый, а мой молчит в ответ. Я говорила, что так нельзя, чтобы он отвечал в ответ, но сильно не лезла.
Сегодня гуляли после тренировки, при чем сам друг предложил, пришли на площадку, там другие пацаны, они начали вместе бегать, моего игнорируют, но он не страдает, занимается своими делами, потом слышу как этот друг говорит моему, закрой рот у тебя зубы жёлтые, проходит время второй пацан говорит, ты говно . Мой молчит.
Это вообще на него не похоже, он всегда был боевой, никогда в обиду себя не давал, мог и подраться.
Шли домой, я начала разговоро, что нельзя разрешать чтобы с ним так разговаривали, обзывали, он должен сказать, что ему не нравится, если не понимают, обозвать в ответ, прекратить общение
Он ответил, что боится , что его будут ругать и что это будет расценено как агрессивное поведение. Ну а общем я долго ему полоскала мозг. Не знаю, что отложилось
Но на самом деле я и сама не знаю как правильно.
Поговорите со мной на эту тему.