Sobald ein System von der Vorschlagsphase zur Ausführung übergeht, ist die Dokumentation seiner Aktionen keine bewährte Betriebspraxis mehr, sondern die einzige Verteidigungsmöglichkeit gegenüber einem beschwerdeführenden Kunden, einem prüfenden Auditor oder einem Gericht. Ohne Dokumentation gibt es keine Erklärung, und das Fehlen einer Erklärung wird stets demjenigen angelastet, der für deren Bereitstellung verantwortlich ist.
Dies ist auch die einzige technische Voraussetzung, die kann nicht nachträglich hinzugefügt werden. Die Sicherheit kann erhöht, Berechtigungen verbessert oder die Datenqualität korrigiert werden, während das System läuft. Vergangenes lässt sich nicht aufzeichnen.
Der Nachweis für die Vollständigkeit eines Datensatzes ist konkret: Wählen Sie einen Fall von vor drei Monaten und erklären Sie genau, was passiert ist.. Zur Beantwortung dieser Frage werden sechs Elemente benötigt:
Element | Was wird gerettet | Wozu dient es? |
|---|---|---|
Eingang | Vom System empfangene Daten und Kontextinformationen | Den Fall nachstellen |
Quellen | Welche Dokumente oder Aufzeichnungen haben Sie konsultiert? | Erklären Sie, woher die Antwort stammt. |
Entscheidung | Modellausgabe, Version und Konfiguration | Driftfehler unterscheiden |
Aktion | Was wurde ausgeführt, auf welchem System und wann? | Prüfung und Stornierung |
Identität | Mit welchen Befugnissen handelte er und auf wessen Bitte hin? | Attributverantwortung |
Validierung | Wer hat es geprüft, was hat sich geändert und wann? | Menschliche Aufsicht demonstrieren |
Die Linie der Quellen Sie wird am häufigsten weggelassen und ist im Falle einer Reklamation am wertvollsten: Sie ermöglicht es, nachzuweisen, dass die Antwort auf korrekten und aktuellen Informationen beruhte, oder genau zu identifizieren, welches veraltete Dokument die Ursache war.
Die Reihe der Modellversion Dadurch können wir zwischen zwei sehr unterschiedlichen Situationen unterscheiden: einem spezifischen Systemfehler und einer allgemeinen Leistungsverschlechterung nach einem Update. Ohne diese Information sind die beiden Fälle nicht zu unterscheiden.
Die drei Rahmenwerke, die diese Angelegenheit regeln, kommen mit unterschiedlichen Vokabularen zu derselben Anforderung.
Er Europäische KI-Regulierung Für bestimmte Systemkategorien sind eine automatische Ereignisprotokollierung, eine technische Dokumentation und eine nachweisbare menschliche Überwachung erforderlich. Seit dem 2. August 2026 gelten zudem die Transparenzpflichten gemäß Artikel 50 und die Sanktionsbefugnisse gegenüber Anbietern von Standardmodellen.
Er NIST-Rahmenwerk für KI-Risikomanagement, Mit seinem spezifischen Profil für generative KI strukturiert es das gesamte Risikomanagement um die Fähigkeit zur Messung und Überwachung.
Der ISO/IEC 42001:2023 Für die Zertifizierung eines KI-Managementsystems sind Nachweise über eine kontinuierliche Überwachung erforderlich. Als Nachweis gelten Aufzeichnungen, nicht Richtlinien.
Keiner der Befragten akzeptiert die Aussage, die Organisation habe sorgfältig gehandelt. Alle drei fordern einen Beweis, und vorgelegt werden die Daten, die während des Systembetriebs gespeichert wurden.
Ein Kunde behauptet, sein Antrag sei vor vier Monaten zu Unrecht abgelehnt worden. Die Entscheidung sei von einem automatisierten System erstellt und von einer Person bestätigt worden.
Die Fragen, die sich stellen werden, und zwar in dieser Reihenfolge: Welche Informationen wurden zur Entscheidung herangezogen, waren diese Informationen korrekt und aktuell, welche Kriterien hat das System angewendet, hat die Person, die die Bestätigung abgegeben hat, den vollständigen Vorschlag gesehen und wurden andere ähnliche Fälle gleich behandelt?.
Eine vollständig registrierte Organisation reagiert innerhalb eines Nachmittags und korrigiert Fehler, um den Schaden zu begrenzen. Eine nicht registrierte Organisation kann lediglich behaupten, dass ihre Prozesse grundsätzlich korrekt sind – genau das, wonach nicht gefragt wird.
Der Unterschied zwischen den beiden Situationen wurde Monate zuvor in einer technischen Diskussion darüber entschieden, was es wert sei, beibehalten zu werden.
Nur das Ergebnis speichern. Ohne die Eingangsdaten oder die Quellen ist das Ergebnis weder rekonstruierbar noch erklärbar.
Verweildauer zu kurz. Die Schadensmeldungen treffen verspätet ein. Eine Frist von dreißig Tagen berücksichtigt die meisten relevanten Fälle nicht. Die Frist sollte sich nach dem tatsächlichen Schadensbearbeitungszyklus des Unternehmens und den geltenden Vorschriften richten, nicht nach den Lagerkosten.
Vereinzelte Aufzeichnungen. Wenn jede Komponente auf ihre eigene Website und ihren eigenen Takt schreibt, erfordert die Rekonstruktion eines Falls das Durchlaufen von fünf Quellen. Eine eindeutige Fallkennung, die den gesamten Ablauf umfasst, löst das Problem und ist kostengünstig.
veränderliches Register. Ein Datensatz, der spurlos verändert werden kann, ist als Beweismittel unzulässig. Seine Beweiskraft beruht auf seiner Unveränderlichkeit.
Eine vollständige Integration ist ein unrealistisches Ziel. Eine ausreichende Integration für einen bestimmten Prozess lässt sich innerhalb weniger Wochen erreichen. Vier Schritte:
In jeder Iteration wird ein wiederverwendbarer Bestandteil der Integrationsschicht erstellt. Nach drei oder vier Prozessen verfügt das Unternehmen über eine Infrastruktur und nicht mehr über isolierte Lösungen. Dies ist der modulare Ansatz, den wir in [Referenz einfügen] beschreiben. Der Flaschenhals ist einmal mehr die Architektur.
Der berechtigte Einwand gegen all das ist der Datenschutz: Die Aufzeichnung der Funktionsweise eines Systems impliziert die Aufzeichnung von Informationen über Personen, sowohl über Kunden als auch über Mitarbeiter.
Dies ist kein Argument gegen die Registrierung, sondern vielmehr ein Plädoyer für deren gute Gestaltung. Drei Maßnahmen decken die meisten Probleme ab:
Eine gut gestaltete Akte schützt sowohl die Organisation als auch die beteiligten Personen, denn sie ermöglicht den Nachweis, dass eine Entscheidung richtig getroffen wurde.
Wenn Ihre Organisation KI-Systeme einsetzt, die Aktionen ausführen, sollten Sie diese Woche eine einstündige Überprüfung durchführen: die vollständige Rekonstruktion eines bestimmten Falls von vor drei Monaten zu beantragen..
Das Ergebnis dieses Tests gibt mehr Aufschluss über das tatsächliche Risiko des Unternehmens als jeder Compliance-Bericht. Und selbst wenn das Ergebnis negativ ausfällt, ist es dennoch ein guter Tag, dies zu erfahren, denn die heute fehlenden Datensätze können morgen erstellt werden. Diejenigen von vor drei Monaten hingegen nicht.
Diese Aufzeichnung ermöglicht es uns, das Vorgehen des Systems in einem konkreten Fall zu rekonstruieren: welche Daten es empfangen, welche Quellen es konsultiert, welche Ergebnisse das Modell in welcher Version generiert hat, welche Aktion es mit welcher Identität ausgeführt hat und wer diese bestätigt hat. Nur so lässt sich eine Entscheidung Monate später erklären.
Denn es ist unumkehrbar: Was nicht gespeichert wurde, existiert nicht. Sicherheit, Berechtigungen oder Datenqualität lassen sich zwar im laufenden Betrieb verbessern, aber die Historie bereits Geschehens kann nicht nachträglich erstellt werden.
Die europäische KI-Verordnung fordert für bestimmte Systemkategorien die automatische Ereignisprotokollierung, technische Dokumentation und nachweisbare menschliche Aufsicht. Das NIST AI RMF strukturiert das Risikomanagement anhand der Mess- und Überwachungsfähigkeit, und ISO/IEC 42001 verlangt für die Zertifizierung den Nachweis einer fortlaufenden Kontrolle.
Die Aufbewahrungsfrist sollte sich nach dem tatsächlichen Schadenszyklus des Unternehmens und den geltenden Vorschriften richten, nicht nach den Lagerkosten. Dreißigtägige Aufbewahrungsfristen decken die meisten Fälle nicht ab, die letztendlich relevant werden, da Ansprüche typischerweise erst Monate später eingehen.
Mit drei Maßnahmen: Minimierung des Inhalts durch Speichern von Verweisen auf die konsultierten Dokumente anstelle vollständiger Kopien, Beschränkung des Zugriffs auf die Datensätze durch eigene Berechtigungen und spezifische Prüfungen sowie Festlegung expliziter Aufbewahrungs- und Löschfristen, die mit den Vorschriften übereinstimmen.
Man wählt einen konkreten Fall von vor drei Monaten und bittet um dessen vollständige Rekonstruktion. Wenn das Team erklären kann, welche Daten eingegeben, welche Quellen verwendet, welche Modellversion eingesetzt, was ausgeführt und wer es validiert hat, ist der Bericht ausreichend.
Könnten Sie eine automatisierte Entscheidung von vor drei Monaten heute rekonstruieren? Wir prüfen, was Ihr System aufzeichnet, was fehlt und was die für Ihren Fall geltenden Vorschriften erfordern. Bewertung anfordern → |