Qualitativen KI-Nutzen bewerten

Das Problem

Ihr Team berichtet: «Seit wir die KI nutzen, sind wir weniger gestresst. Die Antworten an Kundschaft sind einheitlicher. Die langweiligen Routinearbeiten fallen weg.» Die Geschäftsleitung fragt: «Schön, aber wie viel Franken ist das wert?» Darauf gibt es keine saubere Antwort.

Viele Wirkungen von KI sind real, aber schwer in Geld auszudrücken: weniger Überlastung, bessere Servicequalität, schnellere Reaktion, weniger Fehler, mehr Zeit für anspruchsvolle Aufgaben, höhere Zufriedenheit. Wer nur zählt, was sich leicht beziffern lässt, unterschätzt den Nutzen. Wer dagegen beliebige Franken-Beträge erfindet, verliert an Glaubwürdigkeit.

Der Ausweg ist ein dritter Weg: den qualitativen Nutzen beschreiben, mit passenden Indikatoren erfassen und neben der Rechnung mit Zahlen ehrlich darstellen.

Welche Arten von qualitativem Nutzen gibt es?

So lösen Sie es mit KI – Schritt für Schritt

1. Benennen Sie die erwarteten Wirkungen. Fragen Sie das Team und die Kundschaft: Was soll besser werden? Formulieren Sie 3 bis 5 Wirkungen konkret.
2. Legen Sie für jede Wirkung einen Indikator fest. Woran erkennen wir sie? Ein Indikator kann eine Kennzahl, eine Befragung oder eine Beobachtung sein.
3. Erfassen Sie die Ausgangslage. Vor dem Start: Wie ist es jetzt? Ohne Vorher-Wert gibt es keinen Vergleich, siehe Ausgangswerte erfassen.
4. Messen Sie nach einer festgelegten Zeit erneut. Gleiche Methode, gleiche Fragen. Zum Beispiel nach drei und nach sechs Monaten.
5. Gewichten Sie die Wirkungen. Wie wichtig ist jede für Ihren Betrieb (hoch, mittel, gering)? Das bestimmt, wie viel Gewicht sie im Gesamturteil erhält.
6. Bewerten Sie in einer Matrix. Wirkung, Indikator, Vorher, Nachher, Veränderung, Gewicht, Einschätzung (deutlich besser, besser, gleich, schlechter). Daraus ergibt sich ein Gesamtbild.
7. Prüfen Sie auf andere Ursachen. Hat sich etwas anderes geändert (neue Mitarbeitende, saisonale Schwankungen)? Siehe Messfehler vermeiden.
8. Ergänzen Sie die Zahlenrechnung. Stellen Sie qualitative Wirkungen neben die Wirtschaftlichkeitsrechnung, ohne sie in erfundene Franken-Beträge zu pressen. Siehe ROI berechnen.
9. Berichten Sie ehrlich. Zeigen Sie auch negative oder ausbleibende Wirkungen, etwa mehr Kontrollaufwand oder Verunsicherung.

Vorlage zum Kopieren

Mit diesem Auftrag lassen Sie eine Bewertungsmatrix für qualitativen Nutzen entwerfen:

Wir haben in [Betrieb, Branche, Schweiz] eine KI für [Aufgabe, z. B. Kundenkorrespondenz] eingeführt. Erwartete Wirkungen: [Stichworte, z. B. weniger Routinearbeit, einheitlichere Antworten, kürzere Reaktionszeit, mehr Zufriedenheit im Team].
Erstelle eine Bewertungsmatrix als Tabelle mit den Spalten: Wirkung | Indikator (wie erkennen wir sie?) | Messmethode (Kennzahl, Kurzbefragung, Beobachtung) | Wert vorher (leer) | Wert nachher (leer) | Gewicht (hoch/mittel/gering) | Einschätzung (deutlich besser/besser/gleich/schlechter).
Schlage zu jeder Wirkung 2 bis 3 konkrete, kurze Befragungsfragen oder Kennzahlen vor.
Weise darauf hin, welche Wirkungen sich nicht seriös in Franken ausdrücken lassen, und nenne mögliche Fehlerquellen bei der Messung. Erfinde keine Zahlen.

Füllen Sie die Matrix gemeinsam mit dem Team und messen Sie vorher und nachher.

Worauf Sie achten müssen

• Erfundene Franken-Beträge: Wer Entlastung mit einem willkürlichen Betrag bewertet, schwächt die Glaubwürdigkeit der ganzen Rechnung.
• Subjektive Einschätzungen: Befragungen spiegeln Wahrnehmung. Das ist legitim, aber kennzeichnen Sie es so, und fragen Sie neutral.
• Datenschutz und Vertrauen: Befragungen und Auswertungen zu Personen sind sensibel. Nutzen Sie zusammengefasste Auswertungen und vermeiden Sie Leistungskontrolle, siehe Leistungskontrolle vermeiden.
• Kausalität: Eine bessere Stimmung kann andere Gründe haben. Prüfen Sie Alternativen.
• Negative Wirkungen: Auch Verunsicherung, Mehrbelastung oder Qualitätsprobleme gehören in die Bilanz.
• Zeitverlauf: Zu Beginn sinkt die Zufriedenheit manchmal, weil Neues anstrengt. Messen Sie mehrmals.

Ein Beispiel aus der Praxis

Ein Beispiel: Ein Pflegeheim in Solothurn nutzt eine KI, die Dienstübergaben und Berichtstexte vorbereitet.

Vorher: Der Leiter kann dem Stiftungsrat nur sagen: «Das Team ist begeistert.» Auf die Frage nach dem Nutzen in Franken zuckt er mit den Schultern.

Nachher: Er legt drei Wirkungen fest: weniger Zeit für Berichte, einheitlichere Dokumentation, Entlastung am Dienstende. Vor dem Start erfasst er per Kurzbefragung und Stichprobe die Ausgangslage, nach sechs Monaten dieselben Werte. Die Berichtszeit sinkt, die Dokumentation wird einheitlicher, die Entlastung wird von der Mehrheit als spürbar bezeichnet. Dazu gibt es zwei kritische Rückmeldungen zu Fehlern in Texten. Der Stiftungsrat erhält eine Matrix und die Empfehlung, die Nutzung mit Prüfschritt auszuweiten.

So hilft Ihnen Alpasana

Wer den Nutzen von KI-Vorhaben breit beurteilen will, sollte Ziele und Wirkungen früh festlegen. Die KI-Beratung und digitale Transformation von Alpasana unterstützt dabei, Prozesse aufzunehmen, KI-Potenziale zu analysieren, Vorhaben zu priorisieren und einen Umsetzungsplan zu erstellen. Projekte werden individuell offeriert; Sie schildern Ihre Lage, und der Umfang wird gemeinsam geklärt.

Häufige Fragen

Darf ich qualitativen Nutzen in Franken umrechnen?

Nur, wo es eine plausible, nachvollziehbare Grundlage gibt, etwa vermiedene Überstunden. Kennzeichnen Sie Umrechnungen als Annahmen und stellen Sie sie getrennt dar.

Wie viele Indikatoren sind sinnvoll?

Pro Wirkung ein bis zwei. Wer zu viel misst, verzettelt sich und überfordert das Team mit Befragungen.

Wie überzeuge ich die Geschäftsleitung ohne Zahl?

Mit einer klaren Matrix, Vorher-nachher-Werten, Beispielen und ehrlichen Einschränkungen. Eine nachvollziehbare Beschreibung überzeugt oft mehr als eine erfundene Zahl.