Mit denselben Antworten beginnen
Wenn jeder Korrektor andere Arbeiten bewertet, lassen sich Unterschiede schwer auf den Maßstab zurückführen. Wählen Sie für den Abgleich dieselben Antworten und lassen Sie sie unabhängig bearbeiten. Die zuerst genannte Bewertung sollte die anderen nicht bereits beeinflussen.
Verwenden Sie neben klaren Leistungen einige Grenzfälle. Für eine erste Besprechung kann eine kleine Auswahl genügen. Sie belegt jedoch noch nicht, wie groß die Abweichungen über einen ganzen Kurs sind.
Auf Kriterienebene vergleichen
Zwei Korrektoren können dieselbe Gesamtsumme vergeben und trotzdem bei jedem Teilkriterium anders urteilen. Vergleichen Sie daher Punkte und Begründungen je Kriterium. Fragen Sie, welche Aussage erkannt wurde und welche Regel zur Bewertung führte.
Häufige Ursachen sind unklare Teilpunktregeln, unterschiedliche Behandlung von Folgefehlern oder eine nicht geregelte Alternative zur Musterlösung. Die Lösung besteht dann in einer präziseren Vorgabe, nicht im bloßen Mitteln der Punkte.
Um wiederkehrende Abweichungen sichtbar zu machen, können Sie die Bewertungsstreuung zwischen Korrektoren messen. Vergleichen Sie dabei neben der Gesamtpunktzahl auch die einzelnen Kriterien.
Ein fiktiver Gesprächsfall
Eine Antwort nennt zwei richtige Argumente, erklärt aber nur eines. Korrektor A vergibt drei, Korrektor B zwei von vier Punkten. Im Gespräch zeigt sich, dass unklar ist, ob beide Argumente begründet werden müssen. Die Aufgabe verlangt „erläutern“, der Maßstab nennt bisher nur die Argumente.
Die zuständige Fachperson klärt die Erwartung. Anschließend wird sie im Maßstab und an einer Ankerantwort festgehalten. Auch bereits bearbeitete vergleichbare Fälle müssen nach den geltenden Regeln auf Auswirkungen geprüft werden.
Entscheidungen schriftlich festhalten
Explizite Kriterien und Leistungsstufen sind ein Grundprinzip von Bewertungsrastern. Carnegie Mellon erläutert den Aufbau. Ergänzen Sie daraus eine kurze Entscheidungsliste für Ihre Korrekturrunde.
Die Liste sollte Regel, Beispiel und gültige Version enthalten. Eine nur mündlich erklärte Ausnahme erreicht Vertretungen oder später hinzukommende Korrektoren möglicherweise nicht.
Nach der Klärung erneut prüfen
Lassen Sie einige neue Antworten unabhängig bewerten. So erkennen Sie, ob die ergänzte Regel auch außerhalb des besprochenen Beispiels verstanden wird. Bleiben Unterschiede, prüfen Sie, ob die Aufgabe selbst mehrere Deutungen zulässt.
Bei einer KI-Unterstützung gilt dieselbe Logik: Der Vorschlag wird gegen den geklärten Maßstab geprüft. Eine hohe Übereinstimmung mit einem einzelnen Korrektor reicht nicht aus, wenn dessen Maßstab noch ungeklärt ist. Fachliche Klärung und technischer Vergleich sollten deshalb aufeinander aufbauen.
Quellen und weiterführende Grundlagen
Über den Autor
Julian Süllner hat Provehor gegründet und führt das Unternehmen als Geschäftsführer. Er verantwortet Produktentwicklung, Kundenprojekte und die Ratgeber auf dieser Website.