Ankerbeispiele für Bewertung mit KI entwickeln

Das Problem

Frau Keller hat ein sorgfältiges Bewertungsraster mit vier Niveaus. Trotzdem sind sich zwei Lehrpersonen oft uneins, ob ein Text «Niveau 3» oder «Niveau 4» ist. Auch die Lernenden verstehen die Beschreibungen nicht: «Der Text ist logisch aufgebaut» sagt wenig, solange man nicht gesehen hat, wie ein solcher Text aussieht.

Abhilfe schaffen Ankerbeispiele, auch Musterarbeiten oder Benchmarks genannt. Das sind konkrete Arbeiten oder Ausschnitte, die jeweils eine Stufe verdeutlichen. Sie «verankern» die abstrakte Beschreibung an einem greifbaren Fall. Lehrpersonen nutzen sie, um einheitlich zu bewerten, Lernende, um zu sehen, was von ihnen erwartet wird. In Prüfungsteams sind sie eine Grundlage für die Abstimmung.

Echte Arbeiten sind die beste Quelle, aber oft nicht verwendbar: Sie enthalten persönliche Angaben, die Lernenden müssen einverstanden sein, und Prüfungen sind vertraulich. Eine Alternative sind erfundene Beispiele, die KI als Entwurf liefern kann. Sie sind als Übung nützlich, haben aber Grenzen, weil sie oft glatter und weniger fehlerhaft sind als echte Arbeiten.

So lösen Sie es mit KI – Schritt für Schritt

1. Raster und Aufgabe bereitstellen. Ankerbeispiele brauchen ein Raster mit beschriebenen Niveaus und eine klare Aufgabe. Ohne diese lassen sich keine Beispiele zuordnen.
2. Echte Beispiele zuerst prüfen. Gibt es Arbeiten aus früheren Jahren, die Sie mit Erlaubnis anonymisiert verwenden dürfen? Das ist am wertvollsten. Klären Sie Einwilligung und Datenschutz mit der Schulleitung.
3. Erfundene Beispiele entwerfen lassen. Lassen Sie von der KI je Stufe ein bis zwei Beispieltexte oder -lösungen erstellen, kurz und mit typischen Stärken und Schwächen. Verlangen Sie, dass sie keine Note nennt.
4. Fachlich prüfen. Lesen Sie jedes Beispiel. Entspricht es wirklich der Stufe? Sind Fehler realistisch? Korrigieren Sie oder streichen Sie Beispiele.
5. Kommentieren. Ergänzen Sie zu jedem Beispiel eine kurze Begründung, warum es auf dieser Stufe liegt. Diese Begründungen sind der eigentliche Gewinn.
6. Einsetzen. Zeigen Sie Lernenden die Beispiele vor der Aufgabe und lassen Sie sie einordnen. Im Prüfungsteam verwenden Sie sie zur Abstimmung, siehe Bewertungsraster im Team kalibrieren.
7. Sammlung pflegen. Ergänzen Sie jedes Jahr echte (anonymisierte) Beispiele und ersetzen Sie erfundene. Notieren Sie Datum und Herkunft.

Vorlage zum Kopieren

Ich erstelle Ankerbeispiele für ein Bewertungsraster in [Fach, Stufe]. Aufgabe: [Aufgabenbeschreibung].
Raster (Kurzfassung der Niveaus): [Niveaus mit Beschreibung]
Erstelle für jedes Niveau ein erfundenes Beispiel einer Schülerlösung von etwa [100 bis 150] Wörtern, das dieses Niveau typisch zeigt, mit realistischen Stärken und Schwächen. Gib keine Note und kein Urteil an.
Gib mir zusätzlich getrennt:
1. Eine Begründung pro Beispiel (zwei bis drei Sätze), warum es auf diesem Niveau liegt, bezogen auf die Kriterien.
2. Eine Liste der Stellen, an denen ein Beispiel auch einem anderen Niveau zugeordnet werden könnte (Grenzfälle).
3. Hinweise, wo die Beispiele unrealistisch glatt sein könnten.
Verwende keine Namen und keine Personendaten. Erfinde keine Fakten; markiere fachliche Aussagen, die ich prüfen soll, mit «prüfen».

Setzen Sie Fach, Stufe, Aufgabe und Raster ein. Prüfen Sie jedes Beispiel auf Stufentreue und fachliche Richtigkeit.

Worauf Sie achten müssen

• Echte Arbeiten nur nach Prüfung der Vorgaben verwenden. Klären Sie Zweck, Datenschutz, kantonale Vorgaben und die Zuständigkeit Ihrer Institution, bevor Sie Arbeiten in Sammlungen aufnehmen oder weitergeben. Geben Sie keine Schülerdaten in öffentliche KI-Dienste. Orientierung bietet das Educa-Dossier.
• Erfundene Beispiele sind Übung. Sie sind oft zu «sauber» und treffen typische Fehler echter Lernender nicht. Ergänzen Sie sie später durch echte Beispiele.
• Keine Musterlösungen verteilen. Wenn Lernende Ankerbeispiele sehen, kopieren manche den Stil. Besprechen Sie sie als Beispiele, nicht als Vorlagen.
• Grenzfälle einplanen. Beispiele nahe an Stufengrenzen sind lehrreich. Siehe Grenzfälle der Benotung.
• Bewertung bleibt menschlich. Die KI nennt keine Noten. Sie schlägt Entwürfe vor, die Sie beurteilen.
• Kennzeichnung. Sagen Sie Lernenden und Kolleginnen, welche Beispiele erfunden oder KI-erzeugt sind. Das schafft Transparenz.

Ein Beispiel aus der Praxis

Ein erfundenes Beispiel aus einer Berufsfachschule in Olten: Im Fach Allgemeinbildung bewerten drei Lehrpersonen die Vertiefungsarbeiten nach einem Raster mit vier Stufen.

Vorher: Die Lehrpersonen sind sich oft uneinig. Die Lernenden fragen: «Was heisst «argumentiert nachvollziehbar»?»

Nachher: Frau Keller lässt sich mit der KI je Stufe ein erfundenes Beispiel entwerfen und kommentiert es. Zwei Beispiele korrigiert sie fachlich. Im Team ordnen alle die Beispiele zu und besprechen die Abweichungen. Den Lernenden zeigt sie die Beispiele vor der Arbeit. Eine Schülerin sagt: «Jetzt sehe ich, was bei Stufe 3 fehlt.» Im folgenden Jahr ersetzt das Team zwei erfundene durch anonymisierte echte Beispiele, die die Lernenden freigegeben haben.

So hilft Ihnen Alpasana

Brauchbare Ankerbeispiele erfordern genaue Prompts: Raster, Länge, Stufen, Verbote. Im Prompt-Engineering-Kurs von absofort lernen Sie, Aufgabe, Rolle, Kontext, Ziel und Ausgabeformat festzulegen, Beispiele zur Steuerung einzusetzen und Ergebnisse zu prüfen. Der Kurs ist online, mit Zertifikat und ohne Programmierkenntnisse.

Häufige Fragen

Wie viele Ankerbeispiele braucht ein Raster?

Als pragmatischer Ausgangspunkt kann pro Stufe ein Beispiel dienen; ein zusätzliches Beispiel nahe an einer Stufengrenze kann die Abgrenzung veranschaulichen. Bei mehreren Aufgaben prüfen Sie, ob für jede Aufgabe eigene Beispiele nötig sind.

Sind KI-Beispiele realistisch?

Nur bedingt. Sie sind oft glatter und logischer als echte Arbeiten. Verwenden Sie sie als Start und ersetzen Sie sie mit der Zeit durch echte.

Dürfen Lernende die Beispiele sehen?

Ja, das ist sinnvoll, wenn Sie sie als Orientierung und nicht als Vorlage einsetzen. Besprechen Sie, warum ein Beispiel auf einer Stufe liegt.

Wie halte ich die Sammlung aktuell?

Ergänzen Sie nach jeder Prüfungsrunde passende anonymisierte Beispiele, wenn Einwilligungen vorliegen, und vermerken Sie Datum, Aufgabe und Stufe. Löschen Sie veraltete Beispiele.