мальчик 3,5 не дает сдачи

Ситуация такая: сыну 3,5 почти, растет в безусловной любви мамы и папы. Мы не образцово-показательные родители, конечно, и прикрикнем, и я срываюсь на ор, когда устаю, и говорим «перестань», когда плачет, но мы очень стараемся работать над собой и вот такие моментики минимизировать (хотя мы все же живые люди, да?)

Сын очень развит не по годам, общительный, замечают все педагоги в дет.садике, но как-то специально мы с ним не занимаемся, растет в естественной среде: показываем ему окружающий мир, то, что любим мы, не зацикливаемся на кружках/занятиях, не хочу его нагружать раньше времени, тем более с развитием всё более, чем хорошо.

Но есть нюанс, минусом даже не могу назвать, даже не знаю, как это обозначить)))

Наш сын не дерется. Понимаю, что может звучать странновато, но дело в том, что я вижу на площадках, в коллективах, как мальчики могут постоять за себя, кто-то «играет» так. Мы учим, что нужно давать сдачу, но эти слова не работают. Его могут ударить, он пожалуется, я ему объясняю, что нужно давать сдачу, и на этом всё. В нем вообще нет этой жилки, нет ни капли агрессии. Вроде бы это хорошо, но я переживаю за это, потому что окружение будто бы не допускает возможности быть таким добрячком, нужно всё-таки уметь за себя постоять. Думаем над тем, чтобы отдать в соответствующую секцию. Честно, очень не люблю вот эти боксы/самооборону/карате, но хочу, чтобы сын умел за себя постоять, потому что у меня сердце кровью обливается, когда я вижу, что не может, что поступает «правильно», когда не бьет в ответ.
Не знаю, почему у нас так сложилось, и проблема ли это… но дома у нас всегда всё спокойно: мы не ругаемся, очень теплая атмосфера, с сыном мы, конечно, и обнимаемся/нежимся (и я, и муж), но и в нужные моменты проявляем строгость. В конфликты сына я не вмешиваюсь, объясняю ему, как себя вести, пожалею, но не защищаю перед всеми.

Мамы мальчиков, подскажите, как себя лучше вести, как взращивать чувство справедливости и учить давать сдачу?