Видишь ли какая хуйня. Вот какое-то оркобыдло тебе пиздануло что-то на улице, а ты это помнишь и перевариваешь в себе. Представляешь, как бы ты ему ответил, отпиздил, ну и т.д. Это не от страха даже, а потому что твоя и без того низкая самооценка уязвлена. Если бы ты реально себя ценил, то у тебя мысли были бы на уровне "Пиздец, видел сегодня говорящее животное, охуел с этого". А то и сразу забыл бы об этом. Тебя бы это вообще не тронуло ни разу.
Вот ты говоришь, что в детстве отбивался от быдла. Ну представь себе, теперь все еще проще. Большинство перепалок в принципе не доходит до драки. Все на уровне переброса говном заканчивает. Всякое бывает, разумеется, но в основном это редко. Но у тебя внутри сидит страх, что если ты лишнее слово скажешь, то тебя сразу отпиздят, опустят и так и будешь ты в беспомощном состоянии пребывать. Это тоже следствие низкой самооценки. Ты просто не допускаешь мысли, что какой-то агрессивный чушок вполне может быть слабее тебя в 10 раз, и скорее всего сам боится тебя, а потому так сильно и пушит свой хвост, чтобы тебя испугать сильнее.

Идеального совета нет в этом случае. Это длительный процесс. Тебе нужно немного загрубеть и заматереть. Выбросить из головы всякие розовые представления о жизни, где все люди не такие уж плохие, например. Ну или всякие бредни про вселенскую справедливость и еще что-то в таком роде. Перестать думать, что вокруг все какие-то крутые, а ты нет. В среднем, люди вообще не так уж и отличаются и ты ничем не хуже.
Чтобы к этому прийти, тебе нужен опыт. Только взаимодействуя с этим миром ты узнаешь не только сам мир, но и самого себя. Начни с того, что максимально объективно рассмотри своё прошлое, где ты был хорошо, и где не очень. Потом попробуй взять еще десяток своих знакомых и также проанализировать из жизни. Скорее всего ты быстро обнаружишь, что твои представления о себе и других не совсем такие, как ты обычно чувствуешь. Может даже не вериться в том, что у тебя есть хорошие и сильные черты, а у другого есть слабости, хотя они объективно есть.
И вот, базируясь на прошлом, ты сможешь постепенно перейти к работе в настоящем.