Как поменять своё окружение

Послать его на х_й. И делать это постоянно. Тогда все неугодные сами от тебя отстанут.

Если ты Себя уважаешь и любишь абьюзерам ты не интересен, да и вообще, на самом деле, абьюзер это жертва, точнее тот кто хочет играть эту роль))

И нафига ты с такими людьми вообще тусишь?))
"Лучше быть одному, чем с кем попало"(с)

Не общаться с такими людьми. Найти тех кто тебе близок по мышлению, интересам.

Береги свое самолюбие, игнорируй.