Ich kenne das. Oft ist es nur eine unschöne Angewohnheit der Person, da sie nicht permanent in die Augen des Gesprächspartners schauen möchte. Der Schritt ist als "Alternativposition" zwar nicht sehr gut geeignet, jedoch kommt es vor. Die Person schaut einfach herab.
In seltenen Fällen kann es allerdings sein, dass dich die Person sexuell attraktiv findet. Um dies zu kontrollieren, achte darauf, ob die Person von einem deiner Augen zum anderen wandert und auch auf deinen Mund blickt (Triangel-Blick). Dies würde zusätzlich für sexuelle Anziehung sprechen.