KI-Erfolg im Unternehmen messen

Das Problem

Seit einem halben Jahr nutzt Ihr Team ein KI-Werkzeug für Texte. Die Stimmung ist gemischt: Einige schwärmen, andere finden es mühsam. Die Geschäftsleitung fragt: «Bringt das etwas, oder bezahlen wir nur ein Abo?» Sie wissen es nicht genau. Ein Gefühl gibt es, Zahlen nicht.

Das ist die Regel, nicht die Ausnahme. KI wird eingeführt, aber der Erfolg wird nicht gemessen. Dann entscheidet der Eindruck: Wer laut ist, gewinnt. Dabei kann sich das Bild täuschen. Manche Aufgaben werden schneller, aber die Prüfung kostet neue Zeit. Andere erscheinen mühsam und bringen doch bessere Qualität. Ohne Messung bleiben Entscheidungen Bauchgefühl.

Messen heisst nicht, ein Dashboard mit Dutzenden Kennzahlen zu bauen. Für ein KMU genügen wenige einfache Grössen, erfasst über einige Wochen vor und nach der Einführung. Eine KI kann beim Planen der Messung und beim Gestalten von Tabellen helfen, die Zahlen selbst müssen aus Ihrem Betrieb kommen.

So lösen Sie es mit KI – Schritt für Schritt

1. Ziel und Frage festlegen. Was soll KI verbessern? Zeit, Qualität, Kundenzufriedenheit, Entlastung? Formulieren Sie die Frage so, dass sie sich beantworten lässt.

1. Kennzahlen wählen. Wählen Sie drei bis fünf. Typisch sind: Zeitaufwand pro Aufgabe, Fehler und Nacharbeit, Durchlaufzeit, Nutzungshäufigkeit, Zufriedenheit der Nutzenden, Kosten.

1. Ausgangswert erfassen. Messen Sie vor dem Start einige Wochen lang, wie es heute läuft. Ohne Ausgangswert gibt es keinen Vergleich.

1. Messmethode festlegen. Wer erfasst was, wie (Strichliste, Zeiterfassung, kurze Umfrage), wie oft? Je einfacher, desto eher wird sie durchgehalten.

1. Prüfaufwand einrechnen. Erfassen Sie auch die Zeit, die für Kontrolle, Korrektur und Einarbeitung nötig ist. Sie gehört zu den Kosten der KI.

1. Messplan mit KI entwerfen. Nutzen Sie die Vorlage unten für Plan, Tabelle und Umfragefragen.

1. Nach vier bis zwölf Wochen auswerten. Vergleichen Sie Vorher und Nachher. Lesen Sie die Zahlen mit dem Team und fragen Sie nach Erklärungen.

1. Entscheiden und anpassen. Weiterführen, verändern, ausweiten oder beenden. Halten Sie Ergebnis und Gründe fest.

Vorlage zum Kopieren

Ich möchte den Nutzen eines KI-Einsatzes in einem Schweizer KMU messen.

Einsatz: [z. B. KI-Unterstützung für Entwürfe von Kundenmails im Support, 5 Personen]
Ziel: [z. B. Zeit sparen, ohne dass die Qualität leidet]
Zeitraum: [z. B. 4 Wochen vorher, 8 Wochen nachher]

Erstelle:
1. Einen Messplan mit vier bis fünf Kennzahlen (Zeitaufwand, Qualität/Fehler, Nacharbeit, Nutzung, Zufriedenheit), jeweils mit Definition, Messmethode, Zuständigen und Häufigkeit.
2. Eine Excel-Tabellenvorlage für die Erfassung (Spalten, Beispielzeilen mit erfundenen Werten).
3. Fünf Fragen für eine kurze Umfrage unter den Nutzenden (freiwillig, ohne Namen).
4. Hinweise, wie ich den Prüfaufwand und Einarbeitungszeit mitzähle.
5. Hinweise auf typische Fehler bei der Interpretation (z. B. zu kurze Messdauer, einzelne Ausreisser).
Erfinde keine Zahlen, Benchmarks oder Studien. Alle Werte erhebe ich selbst.

Setzen Sie Einsatz, Ziel und Zeitraum ein. Die Tabelle füllen Sie mit echten Messwerten, nicht mit Schätzungen der KI.

Worauf Sie achten müssen

• Vorher-Nachher-Vergleich. Ohne Ausgangswert sind Aussagen über Verbesserung Vermutungen. Messen Sie früh.
• Prüf- und Korrekturaufwand. Er wird oft vergessen. Wenn die KI eine Mail in einer Minute schreibt und die Korrektur fünf Minuten kostet, ist nichts gewonnen.
• Qualität nicht vergessen. Schneller ist nicht besser, wenn mehr Fehler passieren. Erfassen Sie Fehler und Beschwerden.
• Zufall und Ausreisser. Kurze Messzeiträume oder einzelne Ausnahmefälle verzerren. Messen Sie über genug Wochen.
• Datenschutz der Messung. Leistungsdaten einzelner Mitarbeitender sind sensibel. Werten Sie auf Gruppenebene aus und kommunizieren Sie den Zweck. Siehe KI und Überwachung am Arbeitsplatz.
• Kein Druckinstrument. Wer Messung als Kontrolle erlebt, beschönigt Zahlen. Betonen Sie, dass es um Lernen geht.
• Nicht alles ist messbar. Entlastung, Motivation oder Qualität im Detail lassen sich schwer in Zahlen fassen. Ergänzen Sie Gespräche. Siehe KI-Zeitersparnis selbst messen.

Ein Beispiel aus der Praxis

Ein Beispiel: Ein Installationsunternehmen mit 20 Mitarbeitenden in der Region Brugg führt KI für Offertentwürfe ein. Der Inhaber möchte nach drei Monaten wissen, ob sich das lohnt. Die Büroleiterin misst vorher vier Wochen lang, wie lange eine Offerte dauert, und notiert die Zeit.

Nach der Einführung erfasst sie weiter die Zeit, zusätzlich die Prüfzeit und die Zahl der Offerten, die vom Chef korrigiert werden. Nach acht Wochen zeigt sich: Die reine Schreibzeit sinkt deutlich, die Prüfzeit frisst aber einen Teil davon auf. Die Zahl der Korrekturen bleibt gleich. Die Bilanz ist positiv, aber kleiner als gedacht.

Der Inhaber entscheidet, das Werkzeug beizubehalten und die Prüfung mit einer Checkliste zu beschleunigen. Vorher gab es Eindrücke, nachher gibt es Zahlen. Nach einem weiteren Quartal misst die Büroleiterin erneut, um zu sehen, ob sich die Checkliste auszahlt.

So hilft Ihnen Alpasana

Wenn Sie KI-Vorhaben planen, begleiten und bewerten möchten, hilft die KI-Beratung und digitale Transformation von Alpasana. Beschrieben sind die Aufnahme von Prozessen, die Analyse von KI-Potenzialen, die Priorisierung von Vorhaben und ein Umsetzungsplan sowie die Integration von KI-Agenten mit Anwendungsfall, Pilot, Einsatzregeln und Skalierung.

Der Umfang wird zuerst gemeinsam geklärt, Projekte werden individuell offeriert. Eine Vorlage zur Messung finden Sie auch unter KI-Projekterfolg messen: Vorlage.

Häufige Fragen

Wie lange sollte ich messen?

Mindestens vier Wochen vorher und acht Wochen nachher, bei stark schwankender Arbeit länger. So gleichen sich Zufälle aus und Sie sehen einen Trend.

Muss ich alles genau erfassen?

Nein. Stichproben genügen oft. Wichtig ist, dass Sie vor und nach der Einführung gleich messen. Genauigkeit ist weniger wichtig als Vergleichbarkeit.

Was, wenn die Zahlen schlecht sind?

Dann haben Sie etwas gelernt. Fragen Sie nach den Gründen: falsche Aufgabe, fehlende Schulung, schlechtes Werkzeug oder zu hoher Prüfaufwand. Passen Sie an oder beenden Sie den Einsatz.

Kann die KI die Daten auswerten?

Bei einfachen Tabellen kann sie Hilfe bei Formeln und Diagrammen geben. Verwenden Sie dazu nur anonymisierte Gruppendaten und prüfen Sie die Rechnungen selbst.