Wie trennen wir KI-Tests vom laufenden Firmenbetrieb?

Das Problem

Ihre interne KI läuft und das Team verlässt sich darauf. Nun möchte die IT ein neues Modell, eine neue Anweisung oder eine neue Dokumentenquelle ausprobieren. Wenn das direkt im laufenden System geschieht, kann etwas schiefgehen: Antworten ändern sich, das System ist kurz nicht verfügbar, oder vertrauliche Dokumente landen im falschen Bereich.

Sie möchten neue KI-Funktionen testen lassen, ohne die tägliche Arbeit zu stören. Das gelingt mit der Trennung von Testumgebung und Produktivumgebung. Die Produktivumgebung ist das System, das Ihr Team täglich nutzt. Die Testumgebung ist eine abgetrennte Kopie, in der man ausprobieren darf, ohne dass jemand im Alltag davon etwas merkt.

Diese Trennung ist bei Software üblich, wird bei KI-Projekten aber oft vergessen, weil sich vieles «schnell» ausprobieren lässt.

So lösen Sie es mit KI – Schritt für Schritt

1. Klären Sie, was getestet werden soll. Neues Modell, neue Anweisung, neue Dokumente, neue Anbindung? Je klarer, desto gezielter die Testumgebung.

1. Richten Sie die Testumgebung ein. Ein eigener Server oder zumindest eigene Container mit getrennten Daten und Zugängen. Sie muss nicht gleich leistungsfähig sein, sollte aber dieselben Versionen verwenden.

1. Verwenden Sie Testdaten. Nehmen Sie erfundene oder anonymisierte Dokumente, keine echten Kundendaten. Siehe Daten anonymisieren.

1. Trennen Sie Zugänge. Nur das Testteam erhält Zugriff. Zugangsdaten der Produktivumgebung gehören nicht in die Testumgebung.

1. Bereiten Sie Testfragen vor. Eine feste Liste mit erwarteten Antworten, die vor jeder Freigabe durchgespielt wird. Siehe Regressionstest.

1. Legen Sie die Freigabe fest. Wer entscheidet, wann eine Änderung in den Alltag übernommen wird, und nach welchen Kriterien? Nutzen Sie eine Freigabe-Checkliste.

1. Planen Sie die Übernahme. In einem ruhigen Zeitfenster, mit Sicherung und Rückweg. Siehe Rollback.

1. Beziehen Sie eine Pilotgruppe ein. Vor der breiten Einführung testet eine kleine Gruppe aus dem Alltag die Neuerung. Siehe Pilotgruppe auswählen.

Vorlage zum Kopieren

Mit dieser Vorlage erstellen Sie ein Konzept für die Trennung:

Du hilfst mir, die Trennung von Test- und Produktivumgebung für eine interne KI zu planen. Ich bin keine Technikerin. Du erfindest keine Produktnamen und Einstellungen.

Betrieb: [Branche, Anzahl Nutzende]
Produktives System: [kurz beschreiben, z. B. Chat-Oberfläche mit Dokumentensuche für 20 Personen]
Geplante Neuerung: [z. B. neues Modell, neue Dokumentenquelle]
Verfügbare Technik: [ein Server / mehrere / Cloud]
Datenart: [normal / vertraulich / Personendaten]

Erstelle:
1. Eine Tabelle «Test gegen Produktion» mit Zeilen für Server, Daten, Zugänge, Versionen, Verantwortliche, Backup, Überwachung.
2. Einen Ablauf in acht Schritten von der Idee bis zur Übernahme in den Alltag.
3. Eine Liste von Kriterien, die eine Änderung vor der Freigabe erfüllen muss.
4. Fünf Risiken, wenn Tests direkt im Produktivsystem stattfinden.
5. Eine kurze Mitteilung an das Team über ein Testfenster.

Passen Sie die Angaben an und besprechen Sie das Konzept mit Ihrer IT.

Worauf Sie achten müssen

• Echte Daten schützen: Echte Kundendaten gehören nicht in Tests. Das schützt vor Datenschutzverletzungen und vor Fehlern.
• Gleiche Versionen: Wenn Test und Produktion verschieden eingerichtet sind, sagt ein bestandener Test wenig aus.
• Zugänge trennen: Wer in der Testumgebung arbeitet, soll nicht versehentlich Produktivdaten verändern.
• Aufwand realistisch halten: Eine kleine Testumgebung ist besser als keine. Beginnen Sie einfach.
• Freigabe dokumentieren: Notieren Sie, wer wann was freigegeben hat und auf welcher Grundlage.
• Qualität prüfen: KI-Antworten sind nicht immer gleich. Testen Sie jede Frage mehrmals und achten Sie auf Schwankungen.

Ein Beispiel aus der Praxis

Ein Beispiel: Eine Gemeindeverwaltung im Aargau nutzt eine interne KI für Weisungen und Formulare. Der IT-Dienstleister möchte ein neues Modell ausprobieren.

Vorher: Er spielt es abends im laufenden System ein. Am nächsten Morgen sind Antworten kürzer und teils fehlerhaft, und das Team arbeitet mit einer unbrauchbaren KI. Nachher: Die Verwaltung richtet eine Testumgebung mit erfundenen Weisungen ein. Das neue Modell wird dort mit vierzig Testfragen geprüft und erst nach bestandenen Tests, mit Sicherung und Rückweg, in den Alltag übernommen. Zwei Mitarbeitende der Pilotgruppe testen es vorher einen Tag lang.

So hilft Ihnen Alpasana

Bei der Planung von Testumgebung, Freigabeprozess und Einführung neuer KI-Funktionen unterstützt die KI-Beratung und digitale Transformation der Alpasana GmbH. Nach Leistungsbeschreibung gehören dazu die Integration von KI-Agenten mit Anwendungsfall, Pilot, Einsatzregeln und Skalierung sowie das Dokumentieren der Umsetzung. Projekte werden individuell offeriert.

Häufige Fragen

Muss die Testumgebung genauso gross sein wie die Produktion?

Nein. Sie muss aber dieselben Programme und Versionen nutzen, damit die Ergebnisse aussagekräftig sind. Für Leistungs- und Lasttests braucht es allerdings vergleichbare Hardware.

Reicht eine Kopie der Produktivdaten für Tests?

Das ist heikel, weil dann echte Personen- und Kundendaten in die Testumgebung gelangen. Besser sind erfundene oder anonymisierte Daten. Wenn echte Daten nötig sind, braucht es dieselben Schutzmassnahmen wie in der Produktion.

Wer entscheidet über die Freigabe?

Das legen Sie fest, zum Beispiel eine fachlich verantwortliche Person zusammen mit der IT. Wichtig ist, dass die Entscheidung nach festen Kriterien erfolgt und festgehalten wird.

Wie erkläre ich der Geschäftsleitung den Nutzen der Trennung?

Mit einem einfachen Vergleich: Ein neues Rezept probiert man zuerst in der Testküche, nicht am Abend für fünfzig Gäste. Die Trennung verhindert Ausfälle im Alltag, schützt echte Daten und macht Änderungen nachvollziehbar. Der zusätzliche Aufwand ist meist deutlich kleiner als der Schaden eines misslungenen Experiments im laufenden Betrieb.