1. Du wählst den Bereich aus (im Bild A1:F6)
2. Machst wie über die Formel für die linke obere Ecke (z.B. B1="r")
3. weist dieser Bedingung die entsprechende Zellenvorlage mit gelbem Hintergrund zu

Für jede weitere Bedingung (Farbe) wiederholst Du den zweiten und dritten Schritt in der bestehenden bedingten Formatierung

Da ich kein Excel habe, hier ein Screenshot, wie das unter LibreOffice Calc aussieht. Prinzipiell geht das aber in Excel genauso.