Bist du vielleicht sehr introvertiert bzw gibst wenig von dir preis, redest wenig? Menschen könnten verunsichert sein weil sie dich dann nicht einschätzen können, nicht wissen wo sie dran sind. Oder hast du vielleicht eine eher dominante Art? Auch introvertierte können eine starke Ausstrahlung haben die noch mehr verwirren kann wenn man selten spricht.
Mir hat es häufiger geholfen mich zu erklären wenn ich gesehen habe dass mich jemand irritiert oder verängstigt angeschaut hat. Also nochmal was erklärendes zu sagen, nochmal einen Satz hinterher zu schieben, wie ich was gemeint habe.
Nur so Ideen. Am besten mal jemand aus deinem Umfeld fragen dem du etwas vertraust ob er ne Idee dazu hat wie du rüber kommst. Fragen und offen sein hilft öfters.