Боязнь конфликтов и драк

Добрый вечер! Занимался единоборствами с детства и до 17-18 лет с небольшими перерывами. Был постоянно уверен в себе , и даже если и от конфликта меня бросало в дрожь , я быстро находил в себе силы и принимал решения давать отпор. Перешагивал через свой страх с большим трудом. Сейчас мне 21 , со спортом не завязал , так , по возможности занимаюсь единоборствами. Суть проблемы в том , что когда оскорбляют или кричат другие люди ( мужчины в общем) , я начинаю теряться , встаю в ступор. Как только в мой адрес начинает идти агрессию , я сразу замолкаю, начинается паника , сразу ничего не хочется , и ответить ничего не могу. И навыки начинаю применять только тогда , когда меня начинаю бить , или толкать, и то с большим трудом… Подскажите пожалуйста , как выйти из этого состояния паники , научиться давать отпор словесно , и в случае чего перебарывать свой страх.