Selbstverständlich unterscheiden sich Männer und Frauen in diesem Zusammenhang. Einen Unterschied zwischen den Geschlechtern festzustellen ist keineswegs sexistisch. Eine pauschalisierende Aussage - welche du getätigt hast - jedoch schon.
Männer denken oft an Sex und es ist so, dass jede Frau diesbezüglich von ihrem (männlichen) Gegenüber analysiert wird. Dieser Vorgang wirkt sich jedoch nicht zwingend auf den Inhalt und die Art des Gespräches aus. Das ist natürlich und auch Frauen "checken" ihren Gesprächspartner dahingehend, wenn auch in einem anderen Maße.
Der sexuelle Trieb und die Wirkung des Testosterons kollidieren dabei mit Intelligenz, Selbstbeherrschung und Besonnenheit seitens des Mannes. Jeder geht damit unterschiedlich um und bei jedem unterscheiden sich die Auswirkungen auf sein äußeres Verhalten.