Ihre Gedanken sind vollkommen richtig und lassen sich aus mathematisch nachweisen, wobei es wie eine andere Bemerkung hier schon angefügt hat, auch von der Helligkeit der Referenzfläche anhängt.
Der Ansatz wurde beim DESERTEC Projekt in der Wüste unter dem Fall nachgerechent, dass man dort Paneele aufstellt. Während der Wüstenboden eher hell ist und dadurch die Wärmestrahlung nicht aufnimmt, hätten die dunklen Flächen der PV Anlagen die Wärme gebunden und so rechnerisch trotz Stromproduktion zum Treibhauseffekt beigetragen. Vielleicht finde ich noch das Paper dazu.
In der Praxis ist es aber bei Desertec ein wenig anderes, weil man hier eher mit Spiegeln arbeitet und das Licht auf eine kleine Fläche bündelte - aber es waren halt die berühmten Begleitprojekte.
Um diesen Effekt zu minimieren, ist es ja in Griechenland und anderen Gegenden im Süden üblich, auch Dachflächen weiß zu färben.