Gleiches KI-Modell, andere App: Warum ändern sich Antworten?

Das Problem

Sie stellen in der App Ihres Anbieters eine Frage und sind zufrieden. Ihr Kollege stellt dieselbe Frage in einem anderen Programm, das laut Werbung «dasselbe Modell» verwendet, und bekommt eine andere, kürzere oder sogar widersprüchliche Antwort. Wem sollen Sie nun glauben?

Das verunsichert, denn man erwartet von einem Computerprogramm gleiche Ergebnisse bei gleicher Eingabe. Bei KI-Sprachmodellen (Programmen, die Texte Wort für Wort vorhersagen) stimmt diese Erwartung nur bedingt.

Die gute Nachricht: Die Unterschiede haben nachvollziehbare Gründe. Wer sie kennt, kann gezielt dafür sorgen, dass Antworten verlässlicher werden.

Warum antwortet dasselbe Modell nicht gleich?

Ein Modellname wie «GPT», «Claude» oder «Gemini» bezeichnet den Kern, also das trainierte Sprachmodell. Doch zwischen Ihnen und diesem Kern liegt eine ganze Software-Schicht. Sie entscheidet mit, was bei Ihnen ankommt.

Dazu kommt der Zufall: Sprachmodelle wählen bei jedem Wort aus mehreren passenden Möglichkeiten. Selbst in derselben App kann dieselbe Frage zweimal leicht verschieden beantwortet werden. Mehr dazu unter Was bedeutet die Temperatur bei KI?.

So lösen Sie es mit KI – Schritt für Schritt

1. Halten Sie fest, was genau verschieden ist. Kopieren Sie beide Antworten untereinander in ein Dokument. Ist der Inhalt anders, oder nur Länge und Ton?
2. Klären Sie, wo Sie fragen. Notieren Sie je App: Anbieter, gewähltes Modell, Tarif (gratis oder bezahlt) und ob Websuche, Denkmodus oder Erinnerungen aktiv sind. Die Unterschiede liegen meist dort.
3. Stellen Sie gleiche Bedingungen her. Starten Sie in beiden Programmen einen neuen, leeren Chat. Schalten Sie Zusatzfunktionen in beiden gleich ein oder aus.
4. Fragen Sie mit demselben Wortlaut. Verwenden Sie die Vorlage unten und fügen Sie alle nötigen Angaben in die Frage ein, statt sich auf frühere Nachrichten zu verlassen.
5. Wiederholen Sie die Frage dreimal. So sehen Sie, wie stark die Antwort allein durch Zufall schwankt. Bleibt der Kern gleich, ist der Unterschied unwichtig.
6. Prüfen Sie Fakten an der Quelle. Bei Zahlen, Fristen oder Namen gilt weder die eine noch die andere Antwort, bis Sie sie in einer verlässlichen Quelle nachgeschlagen haben.
7. Legen Sie eine Arbeitsregel fest. Für wichtige Aufgaben nutzen Sie immer dieselbe App mit denselben Einstellungen und halten diese in einer kurzen Notiz fest.

Vorlage zum Kopieren

Mit diesem Auftrag erhalten Sie in beiden Programmen vergleichbare Antworten und erfahren zugleich, worauf sich die KI stützt:

Beantworte die folgende Frage in höchstens [Anzahl, z. B. 120] Wörtern.
Frage: [Ihre Frage, z. B. Welche Unterlagen brauche ich für die Anmeldung eines Lernenden im Kanton Aargau?]
Nenne am Ende, ob du dich auf gelerntes Wissen oder auf eine Websuche stützt,
und markiere alle Angaben, bei denen du unsicher bist.

Passen Sie Wortzahl und Frage an Ihre Aufgabe an. Die KI-Aussage über die eigene Stützung ist eine Hilfe, aber kein Beweis; prüfen Sie wichtige Angaben trotzdem selbst.

Worauf Sie achten müssen

• Keine Fehlschlüsse aus einem Einzelversuch: Eine einzelne bessere Antwort belegt nicht, dass eine App insgesamt besser ist. Testen Sie mit mehreren Aufgaben, etwa mit der Testvorlage für den Modellvergleich.
• Unsichtbare Vorgaben: Sie sehen die Systemvorgaben des Anbieters nicht und können sie nicht ändern. Eigene Anweisungen im Chat wirken zusätzlich, ersetzen sie aber nicht.
• Datenschutz: Wenn Sie zum Testen echte Firmen- oder Kundendaten einfügen, geben Sie diese an mehrere Anbieter weiter. Verwenden Sie Testtexte oder anonymisierte Beispiele.
• Stillschweigende Änderungen: Anbieter passen Modelle und Vorgaben laufend an. Eine Antwort von heute kann nächste Woche anders ausfallen. Was dazu gehört, steht unter Was ändert sich bei einem KI-Update?.
• Wichtige Entscheide: Nutzen Sie KI-Antworten bei Recht, Finanzen oder Gesundheit nur als Vorbereitung und lassen Sie sie fachlich prüfen.

Ein Beispiel aus der Praxis

Ein Beispiel: Eine Sachbearbeiterin bei einer Gemeinde in Thurgau fragt nach den Aufbewahrungsfristen für Personaldossiers. In der Chat-App ihres Anbieters erhält sie eine ausführliche Antwort mit Quellenhinweis. Ihre Kollegin erhält über ein Programm der IT-Abteilung eine knappe Aufzählung ohne Quellen.

Vorher: Beide sind verunsichert und vermuten, dass eines der Programme «falsch» sei.

Nachher: Sie vergleichen in neuen Chats mit demselben Wortlaut. Die Chat-App hatte die Websuche eingeschaltet, das interne Programm nicht, und es gab eine Systemvorgabe «kurz antworten». Beide klären die Frist anschliessend bei der zuständigen Stelle, statt einer der Antworten zu vertrauen. Für künftige Fragen legen sie fest, welches Programm wofür gilt.

So hilft Ihnen Alpasana

Wer klar und eindeutig formuliert, bekommt unabhängig vom Programm verlässlichere Antworten. Der Online-Kurs Prompt Engineering von absofort vermittelt, wie Sie Aufgabe, Kontext, Ziel und Ausgabeformat festlegen, Prompts überarbeiten und Ergebnisse prüfen. Es sind keine Programmierkenntnisse nötig.

Dabei erarbeiten Sie auch ein getestetes Prompt-Set für einen wiederkehrenden beruflichen Prozess, also genau das, was Sie bei einem Wechsel der App wiederverwenden können.

Häufige Fragen

Ist die Antwort in der bezahlten Version besser?

Nicht zwingend. Bezahlte Tarife bieten oft grössere Modelle, mehr Nutzung oder Zusatzfunktionen. Ob das für Ihre Aufgabe einen Unterschied macht, zeigt nur ein Test mit Ihren eigenen Beispielen.

Kann ich erzwingen, dass die KI immer gleich antwortet?

Vollständig nicht. Bei einigen Programmen und über die Programmierschnittstelle lässt sich der Zufallsgrad senken, wodurch die Antworten ähnlicher werden. Einfache Chat-Apps bieten diese Einstellung meist nicht an.

Woran erkenne ich, welche Modellfassung ich nutze?

Viele Apps zeigen das Modell in einer Auswahl oder in den Einstellungen an. Fehlt die Angabe, hilft ein Blick in die Hilfeseite des Anbieters. Wie Namenszusätze zu deuten sind, erklärt Was bedeuten Mini, Pro und Preview bei KI-Modellen?.