So. Danke zusammen für die ganzen Antworten!
Wir haben es folgendermaßen gelöst :
Er ist einen Tag zu Hause geblieben und ich bin mir ziemlich sicher das das die absolut beste Entscheidung war. Vor allem was ihm das Gefühl vermittelt das ich hinter ihm stehe und er da nicht alleine durch muss. Wir haben geredet und er meinte es ist alles so viel, seine Freunde sind weg und jetzt wird er geärgert, alles hat sich verändert und er will einfach zurück. Und das Gefühl durfte er daheim einfach mal auslassen.
Kein "da musst du durch" sondern ein "das muss sich einfach total scheiße anfühlen" hat dafür gesorgt das er nochmal echt ziemich bitterlich geweint hat, aber auch meinte das er es nochmal probieren will und er hat mich gefragt was er machen könnte.
Mit Hilfe der vielen Antworten hier habe ich dann beschlossen das er es den Kindern erklären soll wie er sich grad fühlt und das es ja sein kann das das normal für andere ein Spaß ist, aber für ihn gerade nicht.
Er ist Freitags dann naja, nicht glücklich aber erleichtert und vor allem hoffnungsvoll von der Schule gekommen und meinte das sich auch die Jungs entschuldigt haben.
Auserdem habe ich mit der Lehrerin gesprochen und sie wird da ein Auge drauf haben. Ich habe ihr auch ehrlich gesagt das ich ihn deshalb am Vortag daheim gelassen habe und sie konnte es zum Glück sehr gut nachvollziehen.
Also vielen Dank für die Antworten allesamt!