Wie sammeln wir hilfreiches Feedback zu KI-Antworten?

Das Problem

Seit sechs Wochen nutzt das Team die interne KI. In der Kaffeepause heisst es: «Die taugt nicht viel.» Die Verantwortliche möchte die Lösung verbessern, weiss aber nicht, was genau schiefläuft. War die Antwort falsch? Zu lang? Veraltet? Oder war einfach die Frage unklar?

Ohne gezielte Rückmeldung bleibt nur Raten. Die Unzufriedenen schweigen oder reden nur untereinander, und die Verbesserung kommt nicht voran. Frau Müller möchte ein einfaches System, das ohne grossen Aufwand brauchbare Hinweise liefert.

Gutes Feedback entsteht nicht von selbst. Es braucht eine einfache Möglichkeit, eine klare Frage und einen Weg, wie aus den Rückmeldungen wirklich etwas wird.

So lösen Sie es mit KI – Schritt für Schritt

1. Entscheiden Sie, wofür Sie Feedback brauchen. Wollen Sie falsche Antworten finden, Lücken im Wissen entdecken oder die Zufriedenheit messen? Je klarer das Ziel, desto einfacher die Frage.
2. Bauen Sie eine Ein-Klick-Bewertung ein. Neben jeder Antwort erscheinen ein Daumen hoch und ein Daumen runter. Das kostet die Nutzenden keine Minute und liefert ein Grundsignal.
3. Fragen Sie bei «runter» nach dem Grund. Bieten Sie wenige Auswahlmöglichkeiten an: falsch, veraltet, unvollständig, zu lang, am Thema vorbei. Ein optionales Textfeld ergänzt.
4. Machen Sie das Melden eines Fehlers leicht. Eine Schaltfläche «Fehler melden» sendet Frage, Antwort und Zeitpunkt an eine feste Stelle. Eine Vorlage dafür steht unter Fehler dokumentieren.
5. Legen Sie eine zuständige Person fest. Jemand muss die Rückmeldungen wöchentlich ansehen, sortieren und beantworten. Ohne Zuständigkeit versickert alles.
6. Sortieren Sie nach Ursache. Falsche Antwort wegen veralteter Quelle? Wegen unklarer Frage? Wegen Modellgrenze? Mit einer Strichliste sehen Sie nach vier Wochen, was am häufigsten vorkommt.
7. Beheben Sie sichtbar und melden Sie zurück. Wenn ein Hinweis zu einer Verbesserung führt, sagen Sie es dem Team. Das motiviert zum weiteren Melden.
8. Übertragen Sie die Zahlen ins Dashboard. Anteil negativer Bewertungen und häufigste Gründe gehören auf die Betriebsübersicht, siehe Monitoring-Dashboard.

Vorlage zum Kopieren

Mit diesem Auftrag lassen Sie ein kurzes Feedbackformular samt Auswertungsplan entwerfen. Verwenden Sie keine echten Rückmeldungen mit Namen.

Wir haben eine interne KI für [Zweck, z. B. Fragen zu Abläufen]. Entwirf ein einfaches Feedbacksystem für etwa [Anzahl] Mitarbeitende.

Bitte liefere:
1. Eine Ein-Klick-Bewertung mit höchstens fünf Auswahlgründen für negative Bewertungen (einfache Sprache).
2. Ein kurzes Meldeformular mit höchstens fünf Feldern: Was wurde gefragt? Was war falsch oder fehlte? Welche Antwort hätten Sie erwartet? Wie dringend? Dürfen wir nachfragen?
3. Eine Tabelle zur wöchentlichen Auswertung: Datum | Frage (gekürzt) | Ursache | Massnahme | Verantwortlich | Erledigt.
4. Drei Regeln, damit keine Personendaten in den Rückmeldungen landen.

Schreibe so, dass es Personen ohne IT-Kenntnisse verstehen.

Passen Sie Zweck und Teamgrösse an. Die Auswahlgründe ergänzen Sie nach den ersten Wochen mit den Ursachen, die wirklich auftreten.

Worauf Sie achten müssen

• Datenschutz: Fragen und Antworten können Personendaten enthalten. Speichern Sie nur, was nötig ist, und weisen Sie auf das Vermeiden von Namen im Freitext hin. Mehr dazu unter Datensparsame Protokolle.
• Transparenz: Das Team sollte wissen, dass Rückmeldungen gespeichert werden, und wer sie liest. Das schafft Vertrauen.
• Verzerrung: Zufriedene melden sich selten, Verärgerte öfter. Ein hoher Anteil negativer Meldungen kann das Bild verzerren. Ergänzen Sie mit Stichproben.
• Nicht jede Meldung ist berechtigt: Manchmal liegt der Fehler in der Frage. Prüfen Sie, bevor Sie das System anpassen.
• Aufwand begrenzen: Zu lange Formulare werden nicht ausgefüllt. Weniger Felder bringen mehr Rückmeldungen.
• Kein Ersatz für Tests: Feedback zeigt, was auffällt. Ob die Qualität insgesamt stabil bleibt, prüfen Sie mit festen Bewertungskriterien.

Ein Beispiel aus der Praxis

Ein Beispiel: Ein Treuhandbüro in Winterthur betreibt eine interne KI für Fragen zu Abläufen und Vorlagen. Die Partnerin hört, die KI sei «unzuverlässig».

Vorher gibt es nur Gerüchte. Nachher erscheint unter jeder Antwort ein Daumen, bei «runter» fünf Gründe zur Auswahl. Nach vier Wochen zeigt die Strichliste: Die meisten negativen Rückmeldungen lauten «veraltet» und betreffen drei Vorlagen, deren alte Fassungen noch in der Ablage lagen. Das Büro räumt auf, meldet dem Team die Verbesserung zurück, und die negativen Rückmeldungen gehen spürbar zurück.

So hilft Ihnen Alpasana

Feedback ist nur ein Teil eines sauberen KI-Betriebs. Die KI-Beratung und digitale Transformation von Alpasana umfasst die Aufnahme von Prozessen, die Verbesserung von Geschäftsprozessen sowie digitale Workflows und Automatisierungen.

Wenn Sie eine KI als Agenten oder Assistenten einführen, begleitet Alpasana laut Leistungsbeschreibung vom Anwendungsfall über den Pilot bis zu Einsatzregeln und Skalierung. Projekte werden individuell offeriert.

Häufige Fragen

Soll das Feedback anonym sein?

Anonym geht es leichter, mit Namen lässt sich nachfragen. Eine gute Lösung ist anonyme Bewertung plus ein freiwilliges Häkchen «Sie dürfen mich kontaktieren».

Wie viele Rückmeldungen brauche ich?

Nicht viele. Schon wenige Meldungen pro Woche zeigen Muster, wenn sie nach Ursache sortiert werden.

Wer wertet das aus?

Eine feste Person mit Fachwissen, am besten mit der IT als Unterstützung. Wichtig ist ein wöchentlicher, kurzer Termin.

Was, wenn niemand Feedback gibt?

Dann ist der Weg zu aufwendig, oder niemand sieht Wirkung. Vereinfachen Sie die Eingabe und zeigen Sie, was sich aufgrund von Hinweisen verbessert hat.