Das ist mir persönlich noch nie aufgefallen, aber wenn es wirklich so ist das Dich jemand skeptisch anschaut nur weil Du Arabisch redest, dann finde ich das sehr bedenklich! Schlimm was manche Menschen für Vorurteile haben, nur weil jemand eine andere Sprache spricht.
Wenn ich als Deutscher eine andere Sprache höre, egal ob Arabisch, Türkisch, Serbisch oder sonst etwas, dann finde ich daran überhaupt nichts bedrohlich oder seltsam. Es ist für mich einfach eine Sprache die ich nicht verstehe. Manche Sprachen klingen schöner manche nicht so schön, aber das ist immer ein persönlicher Eindruck. Sowas ist immer Geschmackssache.
Am besten ignorierst Du solche Leute einfach.