Попроси кого то кому доверяешь снять тебя на видео в обычном разговоре - незаметно, чтобы ты не позировал. Посмотри потом со стороны. Большинство людей которые "отпугивают" делают что то конкретное и вполне видимое: долгий немигающий взгляд, нулевая мимика в ответ на шутки собеседника, слишком близкая дистанция, очень тихий или монотонный голос. Это всё поведенческие вещи которые меняются осознанно.

"С тобой надо привыкнуть" - это ключевая фраза. Значит ты не отталкиваешь навсегда, просто первое впечатление дает что то тревожащее. Самые частые причины: нет small talk (сразу в суть, без прогрева), очень прямой взгляд без пауз, асимметричная мимика (серьезное лицо пока собеседник смеется).

Проще всего начать с малого: задавай людям вопросы о них самих и слушай ответы с видимым интересом. Кивай. Люди воспринимают внимательного слушателя как безопасного человека.

К психологу. Не потому что с тобой что то не так, а потому что это именно та задача для которой он нужен. Самодиагностика тут сложна: ты не можешь объективно видеть себя со стороны, близкие не скажут правду чтобы не обидеть. Один-два месяца работы с нормальным специалистом дадут больше чем год самокопания.

А может это не ты проблема, а они? Серьезно. Некоторые люди некомфортно себя чувствуют с теми кто не болтает постоянно ни о чем. Интроверты, люди с прямым взглядом и немногословностью часто воспринимаются как "странные" в культуре где принято постоянно заполнять тишину. Это не дефект который надо чинить.