KI-Prüfung ganzer Dokumente: Deutsche Texte einordnen

Das Problem

Frau Keller hat einen Abschlussbericht von dreissig Seiten vor sich: mit Deckblatt, Inhaltsverzeichnis, Tabellen, Zitaten und Literaturliste. Sie möchte das ganze Dokument online auf KI-Anteile prüfen und fragt sich, was ein solcher KI-Check bei einem deutschen Text überhaupt aussagt.

Bei kurzen Absätzen ist die Unsicherheit eines Erkennungswerkzeugs gross. Bei langen Dokumenten kommt ein anderes Problem hinzu: Ein Bericht besteht aus sehr verschiedenen Teilen. Ein Zitat, eine Tabelle, ein Fachglossar und ein freier Text verhalten sich statistisch unterschiedlich. Ein einziger Prozentwert für das ganze Dokument verdeckt das.

Ausserdem sind viele Werkzeuge vor allem für Englisch entwickelt worden. Wie gut sie deutsche Texte oder Schweizer Schreibweisen erfassen, ist nicht immer dokumentiert. Dieser Artikel zeigt, wie Sie ein langes Dokument sinnvoll prüfen und was Sie dem Ergebnis nicht entnehmen dürfen.

So lösen Sie es mit KI – Schritt für Schritt

1. Benennen Sie den Zweck. Geht es um die Frage, ob erlaubte Hilfsmittel verwendet wurden, oder darum, ob das Dokument inhaltlich verlässlich ist? Für die zweite Frage sind Fakten- und Quellenkontrolle meist wichtiger als jede Autorschaftsschätzung.

1. Klären Sie, ob Sie die Datei hochladen dürfen. Ein ganzes Dokument enthält oft Namen, Firmendaten oder persönliche Angaben. Laden Sie es nicht in öffentliche Dienste, wenn Sie keine Erlaubnis haben. Bei eigenen Texten entfernen Sie vorher Namen und vertrauliche Angaben.

1. Lesen Sie die Anbieterangaben zu Sprache und Länge. Suchen Sie nach unterstützten Sprachen, minimaler und maximaler Textlänge und nach der Behandlung von Zitaten, Tabellen und Listen. Fehlen diese Angaben, ist das Ergebnis schwerer einzuordnen.

1. Teilen Sie das Dokument in Abschnitte. Prüfen Sie Einleitung, Hauptteil und Schluss getrennt, soweit das Werkzeug dies zulässt. Lassen Sie Literaturverzeichnis, Anhang und wörtliche Zitate weg, denn sie sind für die Frage nicht aussagekräftig.

1. Lesen Sie das Ergebnis pro Abschnitt. Ein hoher Wert in einem Teil und niedrige Werte in anderen können auf gemischte Autorschaft hinweisen, aber ebenso auf einen anderen Schreibstil in Fachpassagen. Ziehen Sie keinen Schluss aus dem Gesamtwert allein; hilfreich ist Was ein KI-Detektor-Prozentwert aussagt.

1. Prüfen Sie Fakten und Quellen. Wählen Sie als Stichprobe einige Aussagen oder Literaturangaben aus; den Umfang richten Sie nach Dokument und Prüfzweck. Kontrollieren Sie sie in der Originalquelle. Erfundene oder falsch zugeordnete Quellen sind ein deutlicheres Warnzeichen als ein Prozentwert; siehe Erfundene Quellen in Prüfungsarbeiten.

1. Vergleichen Sie mit früheren Arbeiten. Passen Wortschatz, Satzbau und Fehlerbild zu früheren Texten derselben Person? Ein Stilbruch ist ein Anlass zum Nachfragen, kein Nachweis.

1. Führen Sie ein Fachgespräch. Bitten Sie die Autorin, den Aufbau zu erklären, eine Entscheidung zu begründen und eine Grafik oder Tabelle zu erläutern. Dokumentieren Sie danach sachlich, was Sie beobachtet haben.

Einfach erklärt

Ein KI-Check über ein ganzes Dokument liefert in der Regel eine Gesamtbewertung und teils markierte Passagen. Die Bewertung ist eine Schätzung auf Grundlage von Sprachmustern. Sie sagt nichts darüber, ob der Inhalt richtig ist, ob Quellen echt sind oder ob die Aufgabe erfüllt wurde.

Lange Texte wirken auf den ersten Blick verlässlicher, weil mehr Material vorliegt. Es gibt dennoch Fehlerquellen: Wurde ein Teil mit KI formuliert und anschliessend von Hand überarbeitet, entsteht ein Mischtext, den kein Werkzeug sauber trennt. Gleiches gilt für Texte, die mit einem Übersetzungs- oder Korrekturprogramm geglättet wurden.

Auch die Sprache spielt eine Rolle. Die Dokumentation der Anbieter nennt unterstützte Sprachen; Deutsch ist nicht bei allen Diensten gleich gut abgedeckt. Texte in Schweizer Schreibweise, etwa dem Verzicht auf das Eszett, können sich von dem unterscheiden, was ein Modell am häufigsten gesehen hat. Wie stark das ausfällt, wissen Sie nur, wenn der Anbieter es dokumentiert.

Vorlage zum Kopieren

Mit diesem Auftrag erstellen Sie einen Prüfplan für ein Dokument, ohne den Text selbst einzugeben.

Sie unterstützen mich bei der Qualitätsprüfung eines Dokuments.
Dokumentart: [z. B. Projektbericht, 25 Seiten, Berufsfachschule].
Aufgabenstellung: [Aufgabe in eigenen Worten, ohne Namen].
Erstellen Sie eine Prüfliste mit folgenden Teilen:
1. Aussagen, Zahlen und Quellenangaben, die ich stichprobenartig kontrolliere,
2. Anzeichen für unbelegte oder erfundene Quellen,
3. sechs Fragen für ein Fachgespräch zum Aufbau und zu den Entscheidungen,
4. eine Tabelle, in der ich meine Beobachtungen je Abschnitt festhalten kann.
Bewerten Sie keine Autorschaft und vermuten Sie nichts über Personen.
Formulieren Sie in einfacher Sprache.

Ersetzen Sie die Platzhalter und streichen Sie Punkte, die für Ihr Dokument nicht passen.

Worauf Sie achten müssen

• Gesamtwerte nicht überbewerten: Ein Prozentwert über ein Dokument mit Tabellen, Zitaten und Anhängen ist schwer zu deuten. Fragen Sie, worauf er sich bezieht.
• Datenschutz und Vertraulichkeit: Dokumente mit Kundendaten, Personalakten oder Schülerangaben gehören nicht in öffentliche Online-Dienste. Hinweise zu KI und Datenschutz bietet der EDÖB; im Einzelfall entscheidet die zuständige Datenschutzstelle.
• Mehrsprachigkeit: Texte von Lernenden mit anderer Erstsprache oder in einfacher Sprache werden unter Umständen häufiger fälschlich markiert. Einzelheiten stehen in KI-Detektoren und mehrsprachige Lernende.
• Fehlalarme ernst nehmen: Wenn eine Beschuldigung im Raum steht, braucht die Person die Möglichkeit, ihren Schreibprozess darzulegen. Das Vorgehen beschreibt Wenn ein Text fälschlich als KI-Text gilt.
• Keine Zahlengrenzen erfinden: Es gibt keinen allgemein gültigen Prozentwert, ab dem ein Dokument als unerlaubt gilt. Sanktionen richten sich nach dem Reglement Ihrer Institution.
• Ihre eigene Haltung prüfen: Ein auffälliger Stil kann schlicht auf Übung oder Hilfe durch Dritte hinweisen. Bleiben Sie offen für harmlose Erklärungen.

Ein Beispiel aus der Praxis

Ein fiktives Beispiel: Frau Keller betreut an einer höheren Fachschule im Kanton Aargau Projektberichte. Ein Bericht wirkt im Hauptteil auffallend gleichmässig. Ein Online-Check mit Gesamtwert ist verlockend, doch der Bericht enthält Kundendaten eines Lehrbetriebs.

Sie verzichtet auf den Upload und liest den Bericht abschnittsweise. Dabei stellt sie fest, dass drei Literaturangaben in der Bibliothek nicht auffindbar sind. Zwei weitere stimmen, die Seitenangaben passen aber nicht.

Im Fachgespräch erklärt die Studentin den Aufbau gut, kann aber die drei Angaben nicht belegen. Sie räumt ein, ein KI-Werkzeug für die Literaturliste benutzt zu haben, ohne die Angaben zu kontrollieren. Das Ergebnis: Die Literaturliste wird überarbeitet, die Regel zur KI-Nutzung wird schriftlich festgehalten.

So hilft Ihnen Alpasana

Wenn Ihr Betrieb KI-gestützte Dokumente prüfen und dafür Abläufe festlegen will, behandelt die KI-Weiterbildung für Unternehmen auf absofort unter anderem KI für Texte, Datenschutz mit Schweizer Praxisbezug und den Umgang mit Ergebnissen. Ein Erkennungswerkzeug ist nicht Teil des Angebots.

Häufige Fragen

Wie lang darf ein Dokument für einen Online-Check sein?

Das legt jeder Anbieter selbst fest, und kostenlose Versionen sind oft stärker begrenzt. Lesen Sie die Angaben zu Zeichen- oder Wortlimits vor dem Hochladen. Teilen Sie längere Dokumente nicht blind auf, denn Ergebnisse einzelner Teile sind nur eingeschränkt vergleichbar.

Erkennt ein Check auch KI-Texte, die ich nachträglich umgeschrieben habe?

Oft nur teilweise. Wer einen KI-Text umformuliert oder mit eigenen Teilen mischt, verändert die Muster. Deshalb kann ein Werkzeug weder reine noch gemischte Texte sicher unterscheiden.

Ist ein niedriger Wert ein Beweis für einen selbst geschriebenen Text?

Nein. Ein niedriger Wert bedeutet nur, dass das Werkzeug keine auffälligen Muster erkannt hat. Er sagt nichts über Hilfsmittel, Entwürfe oder Absprachen aus.

Was ist wichtiger: Autorschaft oder Richtigkeit?

Das kommt auf den Zweck an. In vielen Betrieben zählt vor allem, dass Aussagen, Zahlen und Quellen stimmen. In Prüfungen ist zusätzlich die Eigenleistung wichtig, die sich besser im Gespräch zeigt als in einem Prozentwert.