KI-Antworten vergleichen: Warum Einigkeit kein Beweis ist

Das Problem

Mehrere KI-Werkzeuge antworten ähnlich. Das wirkt wie eine Abstimmung unter Fachleuten, obwohl niemand weiss, auf welchen Grundlagen die Antworten beruhen. Frau Keller möchte zeigen, warum Zustimmung Vertrauen erzeugen kann, ohne eine unabhängige Bestätigung zu liefern.

Evidenz bedeutet hier nachvollziehbare Belege für eine Aussage. Unabhängige Prüfung heisst, die Behauptung an einer geeigneten Grundlage zu kontrollieren, statt nur eine weitere erzeugte Antwort anzufordern. Verschiedene Produktnamen allein sagen noch nichts darüber aus, wie unabhängig die verwendeten Informationsgrundlagen sind.

Frau Keller benötigt für die Aufgabe kein technisches Wissen über die interne Architektur einzelner Systeme. Ein gut gewähltes Quellenpaket ist wichtiger als eine grosse Werkzeugauswahl. Im Schweizer Unterricht kann ein fiktiver Plan aus dem Schulalltag den Zugang erleichtern, ohne echte Organisationsdaten zu verwenden.

So lösen Sie es mit KI – Schritt für Schritt

1. Eine überprüfbare Frage wählen. Verwenden Sie einen eng begrenzten Sachfall mit zugänglichem Originalmaterial. Prüfen Sie das Material vor der Stunde selbst. Eine offene Geschmacksfrage eignet sich nicht, wenn die Klasse zwischen sachlicher Übereinstimmung und belastbarem Beleg unterscheiden soll.

1. Erwartungen vor dem Vergleich notieren. Fragen Sie, wie sicher sich Lernende bei einer einzelnen Antwort und bei mehreren ähnlichen Antworten fühlen würden. Die Einschätzung bleibt eine persönliche Lernnotiz. Sie soll später Reflexion ermöglichen, nicht Selbstsicherheit benoten oder Personen blossstellen.

1. Antworten unter dokumentierten Bedingungen sammeln. Nutzen Sie freigegebene Zugänge oder vorbereitete Ausgaben. Halten Sie Frage, Datum und bereitgestelltes Material fest. Wenn Systeme unterschiedliche Zusatzinformationen erhalten, muss das im Vergleich sichtbar bleiben; sonst werden ungleiche Ausgangslagen vermischt.

1. Übereinstimmung auf Aussageebene prüfen. Zerlegen Sie die Antworten in einzelne Behauptungen. Ähnliche Formulierungen sind nicht automatisch inhaltlich identisch, und unterschiedliche Wörter können dasselbe meinen. Markieren Sie Gemeinsamkeiten, Widersprüche und zusätzliche Angaben, ohne bereits über Wahrheit abzustimmen.

1. Eine unabhängige Grundlage heranziehen. Öffnen Sie das vorbereitete Originaldokument, führen Sie eine passende Rechnung selbst aus oder prüfen Sie eine konkrete Beobachtung. Notieren Sie die tragende Stelle. Die KI-Ausgaben bleiben Untersuchungsgegenstand und werden nicht selbst als gegenseitige Quellen behandelt.

1. Vertrauen und Befund abgleichen. Lassen Sie die ursprüngliche Einschätzung mit der externen Prüfung vergleichen. Formulieren Sie gemeinsam, was die Übereinstimmung tatsächlich gezeigt hat und was nicht. Ein korrekt beantworteter Fall beweist ebenso wenig eine allgemeine Zuverlässigkeit wie ein gemeinsamer Fehler allgemeine Unbrauchbarkeit.

Vorlage zum Kopieren

Der folgende Prompt, also ein Arbeitsauftrag an die KI, unterstützt Sie als Lehrperson bei der Vorbereitung.

Ich plane eine Unterrichtsaufgabe zum Vergleich von KI-Antworten für [Stufe].
Sachfrage: [prüfbare Frage], bereitgestellte Grundlage: [eigener geprüfter Sachtext]
Erstelle ein leeres Blatt für Behauptung, Übereinstimmung, unabhängigen Beleg und Urteil.
Formuliere Reflexionsfragen zum Vertrauen vor und nach der Prüfung.
Erfinde keine Antworten realer Systeme und keine Angaben zu deren Trainingsdaten.
Ergänze Hinweise für vorbereitete Ausgaben ohne persönliche Konten.
Unterscheide Ähnlichkeit, sachliche Richtigkeit und belegte Aussage.

Ersetzen Sie die Platzhalter durch Ihre Stufe und einen vollständig fiktiven oder freigegebenen Sachfall; prüfen Sie den Entwurf vor dem Einsatz fachlich.

Welche Schlussfolgerung ist zulässig?

Das NIST-Profil zu generativer KI beschreibt Risiken überzeugend falscher Ausgaben. Die Unterrichtsaufgabe setzt deshalb bei einer externen Prüfung an. Sie untersucht weder die innere Arbeitsweise der Modelle noch eine statistisch repräsentative Fehlerhäufigkeit.

Worauf Sie achten müssen

• Daten schützen: Geben Sie keine Namen, Leistungsdaten, privaten Chats oder anderen Personendaten von Lernenden in öffentliche KI-Dienste ein. Verwenden Sie erfundene Sachfälle und die von Ihrer Institution freigegebenen Arbeitswege.
• Antworten prüfen: KI kann falsche Angaben und überzeugend klingende Erklärungen liefern. Vergleichen Sie entscheidende Aussagen mit dem Fachmaterial, bevor Lernende damit weiterarbeiten.
• Grenzen beachten: Aus ähnlichen Antworten lässt sich nicht ablesen, welche Trainingsdaten oder technischen Grundlagen konkret geteilt wurden. Vermeiden Sie solche Zuschreibungen ohne Nachweis. Generative KI kann überzeugend falsche Inhalte erzeugen; der sachliche Prüfweg bleibt deshalb auch bei scheinbar einhelligen Antworten nötig.
• Teilhabe ermöglichen: Passen Sie Sprache und Unterstützung an Alter und Vorwissen an. Stellen Sie vorbereitete Ausgaben oder eine Aufgabe ohne eigenes Konto bereit, damit private Geräte und Abonnements nicht über Lernchancen entscheiden.
• Zuständigkeit klären: Kantone und Bildungsinstitutionen regeln den Einsatz unterschiedlich. Klären Sie rechtliche Einzelfragen mit der zuständigen Fachstelle; die Unterrichtsvorlage ist keine rechtliche Freigabe.

Ein Beispiel aus der Praxis

Ein Beispiel: Frau Keller verwendet in einem Kurs in Aarau einen selbst erstellten fiktiven Veranstaltungsplan. Mehrere vorbereitete KI-Zusammenfassungen nennen denselben Beginn, übersehen aber eine Ausnahme für einen Programmpunkt. Die Teilnehmenden halten die Übereinstimmung zuerst für eine Bestätigung.

Beim Blick auf den Originalplan markieren sie die Ausnahme und korrigieren ihre Zusammenfassung. Im Rückblick benennen sie, dass sie die Antworten gezählt, aber die Bedingungen nicht gelesen hatten. Der Fall zeigt einen möglichen gemeinsamen Fehler im Übungsmaterial. Er erlaubt keine Aussage darüber, wie häufig bestimmte Werkzeuge im Allgemeinen dieselben Fehler machen.

So hilft Ihnen Alpasana

Mit dem Angebot KI-Weiterbildung mit verifizierbarem Lernnachweis bietet Alpasana einen passenden Zugang zur eigenen Weiterbildung. Die Online-Lernplattform verbindet Lerninhalte mit Praxisaufgaben, Modulfragen und Abschlusskontrollen. Angebote für den Einstieg sind ohne Vorkenntnisse zugänglich. Ein erfolgreicher Kursabschluss lässt sich über ein Zertifikat mit eindeutiger Kennung und öffentlicher Verifikation nachweisen.

Das Angebot kann beim Aufbau einer eigenen KI-Grundlage helfen. Die unabhängige Belegprüfung und die Auswahl geeigneter Unterrichtsfälle verantwortet weiterhin die Lehrperson.

Häufige Fragen

Ist der Vergleich mehrerer Antworten nutzlos?

Nein, er kann Unterschiede, offene Fragen und mögliche Prüfpunkte sichtbar machen. Er ist besonders hilfreich, wenn Sie danach gezielt nach Belegen suchen. Die Zahl zustimmender Antworten allein ist jedoch kein Wahrheitsmass.

Was tun wir, wenn alle Antworten richtig sind?

Nutzen Sie den Fall trotzdem zur Unterscheidung von Übereinstimmung und Beleg. Fragen Sie, wodurch die Richtigkeit tatsächlich festgestellt wurde. Sie können ergänzend ein klar gekennzeichnetes konstruiertes Fehlerbeispiel untersuchen lassen.

Brauchen wir mehrere kostenpflichtige Zugänge?

Nein, vorbereitete Antworten genügen für das Lernziel. Dokumentieren Sie deren Herkunft und kennzeichnen Sie von Ihnen konstruierte Beispiele. Die Aufgabe soll Quellenprüfung ermöglichen und keine privaten Abonnements voraussetzen.

Für die Weiterarbeit passen Erfundene KI-Belege als Fehlersuchaufgabe im Seminar nutzen, KI-Recherche: Den Weg zur Originalquelle im Kurs üben.