Daten, Zugriffe und Freigaben im stockenden KI-Projekt prüfen
Ein praktischer Diagnoseablauf für stockende KI-Projekte. Daten, Zugriffe und Freigaben prüfen, einen begrenzten Folgeversuch planen und über Fortsetzung oder Stopp entscheiden.

Der Assistent soll eine Kundenfrage beantworten, greift im Test aber auf eine überholte Anleitung zu. Die aktuelle Fassung liegt in einem anderen Ordner, für den das verwendete Konto keine Leseberechtigung hat. Im Projektgespräch steht trotzdem schon ein Modellwechsel auf der Liste.
Das ist ein hypothetischer Fall. Für eine Bestandsaufnahme empfehlen wir, einen betroffenen Vorgang vom Eingang bis zur fachlichen Abnahme zu verfolgen. Haltet fest, welche Daten tatsächlich verfügbar waren, welches Konto sie abgerufen hat und wer das Ergebnis freigeben sollte. Plant anschließend einen begrenzten Folgeversuch mit vorab vereinbarten Kriterien für Fortsetzung oder Stopp.
Der folgende Ablauf ist unsere redaktionelle Empfehlung für die Diagnose eines stockenden KI-Projekts. Ob sich eine Fortsetzung lohnt, bleibt eine Entscheidung anhand der eigenen Befunde und verfügbaren Mittel.
Den Stillstand an einem Vorgang festhalten
Beginnt mit einer Aufgabe, die gerade unbefriedigend funktioniert. „Unser KI-Projekt liefert schlechte Ergebnisse“ ist als Arbeitsauftrag zu breit. Beschreibt stattdessen beispielsweise, dass ein Antwortentwurf eine veraltete Rückgabefrist nennt und die zuständige Person ihn deshalb vollständig überarbeiten muss.
Sichert für den ausgewählten Vorgang die Eingabe, das ausgegebene Ergebnis, die verwendeten Dokumentstände und die fachlich erwartete Antwort. Vermerkt außerdem die beteiligten Systeme und den Zeitpunkt des Versuchs. Für spätere Vergleiche sollte nachvollziehbar bleiben, welche Version von Anwendung, Konfiguration und Daten verwendet wurde.
Formuliert danach eine überprüfbare Vermutung. Im Einstiegsbeispiel könnte sie lauten, dass die aktuelle Anleitung beim Abruf fehlt. Prüft zunächst genau das, bevor ihr mehrere technische Änderungen gleichzeitig ausprobiert.
Als Ergebnis sollte ein kurzer Befund entstehen, den Fachbereich und technische Umsetzung gemeinsam nachvollziehen können. Eine offene Frage darf dabei offen bleiben, etwa wenn noch kein Abrufprotokoll vorliegt.
Daten auf Herkunft, Stand und fachliche Verantwortung prüfen
Nehmt die Informationen zusammen, die für den ausgewählten Vorgang erforderlich sind. Notiert zu jeder Quelle ihren Ablageort, ihren Stand und die Person, die fachlich über Änderungen entscheidet. Kennzeichnet widersprüchliche oder überholte Fassungen ausdrücklich.
Prüft anschließend am konkreten Beispiel, ob der Anwendung die benötigten Inhalte tatsächlich vorliegen. Bei einer Dokumentensuche empfehlen wir, den abgerufenen Ausschnitt mit der Originalstelle zu vergleichen. So lässt sich im Test unterscheiden, ob bereits die falsche Fassung ausgewählt wurde oder ob der Entwurf eine passende Quelle unzutreffend wiedergibt.
Vereinbart auch, wie mit fehlenden Informationen umzugehen ist. Für den Antwortassistenten könnte die Vorgabe lauten, bei einer unbelegten Rückgabefrist die Bearbeitung an eine zuständige Person zu übergeben. Eine frei ergänzte Frist wäre nach den vereinbarten Kriterien ein Fehler.
Begrenzt die Bestandsaufnahme auf den ausgewählten Ablauf. Eine vollständige Neuordnung aller Unternehmensdaten ist dafür kein sinnvoller erster Arbeitsauftrag.
Zugriffe mit dem vorgesehenen Konto nachvollziehen
Wiederholt den Vorgang mit der technischen Identität, die für den späteren Ablauf vorgesehen ist. Dokumentiert, welche Quelle erreichbar ist und wo ein Abruf scheitert. Ein erfolgreicher Versuch mit einem persönlichen Administrationskonto sollte einen eigenen Testeintrag erhalten und getrennt bewertet werden.
Unterscheidet dabei Lesen, Schreiben und das Auslösen weiterer Aktionen. Für einen Assistenten, der zunächst nur Antwortentwürfe vorbereiten soll, empfehlen wir einen Testumfang ohne Versand und ohne Änderungen an Kundendaten.
Prüft außerdem einen absichtlich gesperrten Inhalt. Legt vorher fest, welche Reaktion ihr erwartet, etwa einen Hinweis auf die fehlende Berechtigung und eine Übergabe zur manuellen Bearbeitung. Bewertet den Versuch dann gegen genau diese Vorgabe.
Fehlt ein Zugriff auf eine benötigte Quelle, haltet den offenen Entscheid fest. Benennt die zuständige Person und den benötigten Umfang. Eine technische Erreichbarkeit allein soll nach unserem Vorschlag noch keine Erlaubnis zur Nutzung im Versuch ersetzen.
Freigaben für den begrenzten Versuch benennen
Trennt für die Projektarbeit die Entscheidung über die Datennutzung, die technische Durchführung und die fachliche Abnahme. Haltet für jede Entscheidung eine verantwortliche Person sowie den erlaubten Umfang fest. Beispielsweise kann ein Versuch mit ausgewählten Dokumenten erlaubt sein, während der Versand von Antworten weiterhin eine persönliche Freigabe benötigt.
Beschreibt die Freigabe so, dass die ausführende Person daraus handeln kann. „IT hat zugestimmt“ lässt offen, für welches Konto, welche Daten und welche Aktionen die Zustimmung gilt. Notiert stattdessen den Umfang, die Bedingungen und gegebenenfalls das Ende der Freigabe.
Für den Diagnoseversuch empfehlen wir außerdem eine benannte Vertretung und einen Weg für offene Fragen. Fehlt eine erforderliche Entscheidung, bleibt der betroffene Versuchsschritt pausiert. Der Artikel behandelt damit die Arbeitsorganisation eines einzelnen Projekts; übergreifende Freigabeverfahren für sämtliche KI-Anwendungen benötigen eine eigene Betrachtung.
Erfolg am fachlichen Ergebnis messen
Google unterscheidet Erfolgskriterien einer ML-Anwendung von den Bewertungsmetriken des Modells. Google zur Definition von Erfolgskriterien erläutert die Unterscheidung im Abschnitt „Define the success metrics“ (Stand 25.08.2025, abgerufen am 18.11.2026).
Für unsere Diagnoseempfehlung bedeutet das, vor dem nächsten Versuch festzulegen, wann ein Ergebnis für die vorgesehene Aufgabe brauchbar ist. Beim Antwortassistenten könnten eine belegte Rückgabefrist, ein zutreffender Quellenverweis und ein Entwurf ohne fachliche Korrektur zu den vereinbarten Kriterien gehören. Erfasst zusätzlich die benötigte Prüfzeit und die Fälle, die zur manuellen Bearbeitung zurückgehen.
Vereinbart den Umgang mit Fehlern ebenfalls vorab. Eine sprachliche Überarbeitung kann im Beispiel akzeptabel sein, während eine unbelegte Frist den Entwurf von der Nutzung ausschließt. Die Grenzen sollten die Personen festlegen, die das Ergebnis fachlich verantworten.
Eine Lösung ohne ML als Vergleich heranziehen
Google empfiehlt als Vergleich eine optimierte bestehende Lösung ohne maschinelles Lernen oder, falls noch keine vorhanden ist, zunächst einen manuellen Versuch mit einer Heuristik. Zum Vergleich gehören laut Google Qualität, Kosten und Wartung. Die Google-Anleitung zur Problemdefinition beschreibt das Vorgehen im Abschnitt „Clear use case for ML“ (Stand 25.08.2025, abgerufen am 18.11.2026).
Für das hypothetische Projekt schlagen wir als Vergleich vor, dieselben Fragen anhand einer gepflegten Anleitung und vorhandener Textbausteine zu bearbeiten. Prüft zuerst, ob Anleitung und Textbausteine den aktuellen Stand enthalten. Verwendet anschließend für beide Wege dieselben Fragen und dieselben fachlichen Abnahmekriterien.
Notiert neben der Ergebnisqualität den gesamten Aufwand für Bearbeitung und Kontrolle. Schätzt außerdem, wer Änderungen an Dokumenten, Zugängen und Anwendung künftig betreuen müsste. Kennzeichnet Schätzungen als solche. Der Vergleich soll eine Entscheidung über den nächsten Versuch ermöglichen; er belegt noch keine dauerhafte Wirtschaftlichkeit.
Einen begrenzten Folgeversuch vereinbaren
Nehmen wir an, die Bestandsaufnahme bestätigt im hypothetischen Beispiel den fehlenden Zugriff auf die aktuelle Anleitung. Als nächsten Versuch empfehlen wir, ausschließlich den Zugriff auf den dafür freigegebenen Dokumentbestand zu korrigieren. Modell und übrige Verarbeitung bleiben für den Vergleich unverändert.
Das Team könnte dafür einen Umfang von 20 ausgewählten Fragen und fünf Arbeitstagen vereinbaren. Das sind frei gewählte Beispielgrenzen. Die Fragen sollten sowohl beantwortbare Fälle als auch fehlende Informationen und gesperrte Inhalte abdecken. Haltet vor Beginn fest, welche Antwort oder Übergabe jeweils erwartet wird.
Als ebenfalls frei gewählte Abnahmegrenze könnten mindestens 18 fachlich nutzbare Entwürfe vereinbart werden. Zusätzlich müsste der Ablauf bei sämtlichen gesperrten Inhalten den vorgesehenen Fehlerpfad einhalten. Bewertet beide Bedingungen getrennt, damit ein guter Durchschnitt keinen Fehler beim Zugriff verdeckt.
Am Ende vergleichen die benannten Verantwortlichen die Ergebnisse mit den vorab festgelegten Grenzen. Bei erfüllten Kriterien kann ein weiterer begrenzter Schritt folgen. Bleibt eine notwendige Freigabe offen, pausiert der betroffene Teil. Werden die Kriterien verfehlt, entscheidet das Team anhand des dokumentierten Fehlers, ob eine weitere überprüfbare Vermutung den Aufwand rechtfertigt oder der Ansatz beendet wird.
Checkliste vor dem nächsten Versuch
- Ein konkreter Vorgang mit Eingabe, Ergebnis und erwarteter fachlicher Antwort ist dokumentiert.
- Benötigte Quellen, Dokumentstände und fachlich verantwortliche Personen sind benannt.
- Der Zugriff wurde mit dem vorgesehenen Konto geprüft; erlaubte und gesperrte Fälle sind erfasst.
- Datennutzung, technische Durchführung und fachliche Abnahme haben jeweils eine zuständige Person.
- Der erlaubte Umfang des Versuchs sowie offene Entscheidungen sind schriftlich festgehalten.
- Vergleichsweg, Prüffragen und Abnahmekriterien stehen vor Beginn fest.
- Zeitrahmen, Aufwand und Termin für die Stop-/Weiter-Entscheidung sind vereinbart.
Lasst offene Punkte sichtbar stehen und ergänzt jeweils, welche Information oder Entscheidung fehlt. So beginnt der nächste Versuch mit einem konkreten Prüfauftrag.
Wenn du dazu mit CODARIQ Kontakt aufnehmen möchtest, findest du den vorhandenen Kontaktweg auf der CODARIQ-Startseite. Für eine erste Beschreibung genügen die betroffene Aufgabe, ein anonymisiertes Fehlerbeispiel und die noch offene Entscheidung.