Wie prüfen wir, ob unsere KI-Sicherheitsschulung hilft?

Das Problem

Ihr Team hat an einer KI-Sicherheitsschulung teilgenommen. Alle haben ein Quiz bestanden, die Stimmung war gut. Doch drei Wochen später kopiert jemand wieder Kundendaten in einen KI-Chat. War die Schulung umsonst?

Nicht unbedingt, aber diese Frage zeigt das Kernproblem: Ein bestandenes Quiz belegt, dass jemand etwas wusste, nicht, dass er es anwendet. Zwischen Wissen und Handeln liegt der Alltag mit Zeitdruck, Gewohnheiten und Ablenkung. Fachleute sprechen vom Lerntransfer: Wird das Gelernte in der täglichen Arbeit eingesetzt?

Viele Betriebe messen nur die Teilnahme oder die Zufriedenheit. Beides sagt wenig über die Wirkung. Mit einfachen Mitteln finden Sie heraus, ob die Schulung hilft, und können nachbessern, wenn nicht.

So lösen Sie es mit KI – Schritt für Schritt

1. Legen Sie vor der Schulung fest, woran Sie Erfolg erkennen. Beispiele: «Mehr Verdachtsmeldungen», «keine Kundendaten in unfreigegebenen Werkzeugen», «Rückbestätigung bei Zahlungsänderungen wird eingehalten». Wählen Sie zwei bis drei Merkmale.

1. Erfassen Sie den Ausgangszustand. Wie war es vorher? Wie viele Meldungen pro Monat, wie viele Vorfälle? Ohne Vergleich lässt sich keine Veränderung zeigen. Vorlage: Schulungsbedarf erheben.

1. Testen Sie das Wissen direkt nach der Schulung. Ein kurzes Quiz zeigt, ob die Inhalte angekommen sind. Siehe KI-Sicherheits-Lernquiz. Das ist die erste Stufe.

1. Geben Sie eine Praxisaufgabe mit. Zum Beispiel: «Erstellen Sie für Ihre häufigste KI-Aufgabe einen Prompt ohne Kundendaten» oder «Prüfen Sie bei fünf Mails Absender und Link». Die Ergebnisse zeigen, ob das Wissen anwendbar ist.

1. Beobachten Sie nach vier bis sechs Wochen. Gehen Sie freundlich durch den Alltag: Wird die Datenampel genutzt? Sind Meldungen eingegangen? Hängen die Regeln noch aus? Es geht um Muster, nicht um Kontrolle einzelner Personen.

1. Holen Sie Rückmeldungen ein. Fragen Sie das Team: «Was hat Ihnen geholfen? Was haben Sie noch nicht umgesetzt, und warum?» Oft zeigen die Hindernisse (Zeit, fehlende Werkzeuge, unklare Regeln), wo nachzubessern ist.

1. Wiederholen Sie eine Mini-Übung nach drei Monaten. Eine kurze Übung zeigt, was hängengeblieben ist. Siehe Phishing-Übung planen.

1. Passen Sie an und dokumentieren Sie. Wenn etwas nicht wirkt, ändern Sie Inhalt, Form oder Rahmenbedingungen. Halten Sie Ergebnisse und Anpassungen fest. Mehr zum Transfer: Schulung und Praxistransfer.

Vier Ebenen der Wirkung:

Vorlage zum Kopieren

Mit diesem Prompt entwerfen Sie Fragen für die Rückmeldung nach vier bis sechs Wochen. Verwenden Sie keine Namen von Mitarbeitenden:

Wir haben vor [Zeitraum] eine Schulung zu KI-Sicherheit durchgeführt. Themen: [Themen]. Wir möchten herausfinden, ob sich das Verhalten im Alltag verändert hat.
Erstelle einen kurzen Fragebogen mit höchstens acht Fragen (Anrede «Sie», einfache Sprache), der folgendes abdeckt: Anwendung des Gelernten, Hindernisse, noch offene Unsicherheiten, Verbesserungsvorschläge. Mische Ankreuzfragen und zwei offene Fragen.
Schlage ausserdem drei Beobachtungspunkte vor, die ich im Alltag ohne Kontrolle einzelner Personen prüfen kann. Erfinde keine Zahlen oder Studien.

Ersetzen Sie Zeitraum und Themen. Besprechen Sie die Fragen mit Ihrer Leitung, bevor Sie sie verwenden.

Worauf Sie achten müssen

• Wissen ist nicht Verhalten: Ein gutes Quiz ersetzt keine Beobachtung. Messen Sie beides.
• Keine Überwachung: Beobachtung heisst, Muster anzusehen, nicht Mitarbeitende zu kontrollieren. Klären Sie Zweck und Grenzen mit dem Team und der Datenschutzverantwortung.
• Zahlen nicht überinterpretieren: In kleinen Teams sind Zahlen schwankend. Ein Monat mit mehr Meldungen kann Erfolg bedeuten, nicht Misserfolg, weil mehr aufgefallen ist.
• Ursachen suchen, nicht Schuldige: Wenn Regeln nicht umgesetzt werden, liegt es oft an Zeitdruck, unklaren Prozessen oder fehlenden Werkzeugen.
• Keine erfundenen Wirkungsversprechen: Lassen Sie sich von Anbietern belegen, was ihre Schulung bewirkt, und prüfen Sie es im eigenen Betrieb.

Ein Beispiel aus der Praxis

Ein Beispiel: Ein Bauunternehmen in Wohlen hat eine Schulung zur Chefmasche durchgeführt. Im Quiz haben alle bestanden. Nach sechs Wochen fragt die Büroleiterin nach, ob die Rückbestätigung bei Zahlungsänderungen angewendet wird. Die Antwort: meistens, aber nicht, wenn es schnell gehen muss.

Vorher war der Erfolg an der Zahl der Teilnehmenden gemessen worden. Nachher zeigt die Rückmeldung, dass die Rückruf-Nummern schwer auffindbar sind. Die Büroleiterin legt eine Liste an den Arbeitsplatz, und beim nächsten Gespräch ist die Anwendung deutlich besser. Zwei zusätzliche Meldungen im Quartal zeigen, dass das Team aufmerksamer ist.

So hilft Ihnen Alpasana

Für Lernen mit überprüfbaren Ergebnissen bietet die KI-Weiterbildung für Unternehmen von absofort Online-Kurse von den Grundlagen bis zum Executive-Diplomlehrgang: Lernen im eigenen Tempo, verifizierbare Abschlüsse, Datenschutz und der verantwortungsbewusste Umgang mit Unternehmensdaten als Lerninhalte. Für Firmenlösungen und Teambuchungen gibt es eine Kontaktmöglichkeit.

Die Messung des Verhaltens im Alltag bleibt Aufgabe Ihres Betriebs.

Häufige Fragen

Wann ist der beste Zeitpunkt für die Prüfung?

Direkt nach der Schulung für das Wissen, nach vier bis sechs Wochen für das Verhalten im Alltag, und nach etwa drei Monaten für das, was hängengeblieben ist.

Was, wenn die Wirkung ausbleibt?

Suchen Sie die Ursache: War der Inhalt zu allgemein, fehlte die Übung, fehlt es an Zeit oder Rückhalt? Passen Sie das an, statt dieselbe Schulung zu wiederholen.

Brauche ich dafür Fachleute?

Für den Start nicht. Eine Person mit Überblick, ein kurzer Fragebogen und Gespräche im Team genügen. Bei grösseren Programmen kann Unterstützung sinnvoll sein.