KI-Vorhaben auf dem Prüfstand: Weiterführen, ändern oder stoppen?

Sieben Prüfdimensionen und priorisierte Unsicherheiten helfen, den nächsten Schritt eines KI-Vorhabens anhand von Befunden, Risiken und erwartetem Erkenntnisgewinn nachvollziehbar zu begründen.

·

·


Iterativer Projektweg eines KI-Vorhabens mit wiederholter Prüfung und Rückkopplung zur Bewertung vor der nächsten Projektentscheidung.
Ca. 25 Min. Lesezeit Kurzfassung für Entscheider öffnen
zum Anfang

Ein KI-Vorhaben kann technisch interessant sein und trotzdem am falschen Punkt weiterarbeiten. Vielleicht wird ein Pilot geplant, dessen Laufzeit die entscheidende Frage gar nicht beantworten kann.

Dieser Beitrag führt die Bausteine des fachlichen Lernpfads „Von der KI-Idee zur belastbaren Projektentscheidung“ zu einer gemeinsamen Prüflogik zusammen. Sie lässt sich auch ohne die vorherigen Artikel anwenden. Entscheidend ist, welchen nächsten Schritt die vorhandenen Erkenntnisse tatsächlich tragen.

Jetzt steht Nordwerk vor einer Projektentscheidung

Wer den Lernpfad verfolgt hat, kennt das fiktive Unternehmen Nordwerk bereits: Ein Modell soll Hinweise auf bevorstehende spindelbezogene Störungen liefern. Die bisherigen Beiträge haben untersucht, welche Daten dafür brauchbar sind, was ein Proof of Concept (PoC) – ein begrenzter Nachweis zu einer konkreten Machbarkeits- oder Lernfrage – tatsächlich zeigt, welcher Vergleich nötig ist und wie aus einer Warnung wirtschaftlicher Nutzen entstehen könnte.

Jetzt geht es um die nächste Projektentscheidung. Die folgenden Fallinformationen reichen für eine eigene erste Einschätzung; Vorkenntnisse aus dem Lernpfad sind dafür nicht nötig.

Der bekannte Stand wird um eine hypothetische Planungssituation ergänzt. Unternehmen, Verlauf und Annahmen sind erfunden. Auf dieser Basis können Sie direkt einen ersten Beschluss formulieren:

Ausgangspunkt Verbleibende Unsicherheit
Der retrospektive PoC liefert ein technisch interessantes Signal. Zusätzlicher Nutzen gegenüber dem bestehenden Instandhaltungsprozess ist noch nicht belegt.
Die Daten stammen überwiegend aus einer älteren Spindelgeneration. Der geplante Versuch soll an neueren Spindeln stattfinden; die Übertragbarkeit ist ungeprüft.
Die Instandhaltung könnte Hinweise prüfen. Rechtzeitige geeignete Maßnahmen und ausreichende Kapazität sind noch nicht untersucht.
Der Business Case – die wirtschaftliche Nutzen-/Kostenbetrachtung – wird bei einer ausreichend hohen wirksamen Reaktionsquote positiv. Diese Quote ist bisher eine Annahme, kein gemessener Betriebsbefund.
Für diese Aufgabe nehmen wir einen vorgeschlagenen dreimonatigen Pilot an. Es könnten nur wenige relevante Störungen auftreten.

Für die Beispielanwendung nehmen wir an, dass Bearbeitungsrollen für die Vorbereitung zugeordnet sind. Wer Datennutzung, Prüfauftrag und Ressourcen verbindlich freigeben darf, ist damit noch nicht bestätigt. Auch verfügbare Prüfkapazität, Aufwandlimit und erwarteter Erkenntniswert der beiden Vorprüfungen sind vor ihrer Durchführung zu klären.

Welchen nächsten Schritt würden Sie freigeben – und welchen ausdrücklich noch nicht?

Formulieren Sie Ihren Beschluss zunächst in vier Zeilen:

  1. Entscheidung: Weiterführen, Rescope (neu eingrenzen), Voraussetzungen zuerst, Defer (vertagen) oder Stop (beenden)? Die Begriffe werden später im Beitrag präzisiert.
  2. Priorität: Welche Unsicherheit prüfen Sie zuerst, und warum könnte ihr Ergebnis die Entscheidung aus 1. verändern?
  3. Prüfpaket: Welche höchstens zwei Untersuchungen mit Bezug zur gewählten Unsicherheit beauftragen Sie zunächst?
  4. Grenze: Was bleibt danach offen und welches Ergebnis der Untersuchungen würde Ihre Entscheidung aus 1. kippen?

Die Begrenzung auf zwei Untersuchungen ist eine Übungsregel. Ein reales Vorhaben kann ein anderes Prüfpaket benötigen. Halten Sie Ihre Antwort fest; wir kommen darauf zurück.


Kurzfassung für Entscheider öffnen

Für Leser mit wenig Zeit: die Kernaussagen dieses Beitrags in kompakter Form.

Kernaussage: Ein KI- oder Datenvorhaben braucht zunächst einen klaren Entscheidungsbezug und einen breiten Blick auf wesentliche Voraussetzungen. Danach wird gezielt vertieft, was den nächsten Beschluss verändern kann.

Methodische Grundlage: Die Prüfung wird mit neuen Erkenntnissen wiederholt und angepasst. Welche Evidenz nötig ist, hängt von Anwendung und anstehender Entscheidung ab, unsichere Nutzenannahmen bleiben sichtbar. Die hier verwendeten sieben Prüfdimensionen und Schablonen sind meine eigene Synthese.

Größte Unsicherheit: Welche Frage zuerst geklärt werden sollte, hängt von Anwendung, Risiken, Abhängigkeiten und verfügbaren Prüfwegen ab. Ein kurzer Versuch kann zeigen, ob sich ein neues Verfahren in bestehende Abläufe integrieren lässt. Ob dadurch tatsächlich weniger Fehler, Aufwand oder Kosten entstehen, muss gesondert geprüft werden.

Praktische Konsequenz: Benennen Sie den anstehenden Beschluss, sichten Sie die sieben Prüfdimensionen und wählen Sie einen begrenzten nächsten Schritt mit Lernziel, Vergleich, Aufwandgrenze und erneuter Entscheidung. Das Arbeitsmaterial 1 – KI-Vorhabenprüfung unterstützt dabei, Befunde und offene Fragen für diesen Beschluss strukturiert festzuhalten.

Einseitige Zusammenfassung herunterladen (PDF · 1 Seite)


Zuerst festlegen, worüber entschieden wird

Zwei Fragen gehören auseinander:

Ebene Leitfrage Beispiel Nordwerk
Anwendung Welche Handlung oder Arbeitsleistung soll sich verbessern? Zusätzliche Diagnose, Wartung oder Weiterbetrieb bei einer auffälligen Spindel.
Projekt Welche weitere Arbeit ist jetzt gerechtfertigt? Datenprüfung, begrenzter Versuch, Veränderung des Einsatzbereichs oder Beenden.

Gewünschte Wirkung, Modellaufgabe und Systemoutput sollten unterscheidbar sein. Eine Verbesserung der technischen Zielgröße muss zum beabsichtigten Ergebnis passen. [1] Ist das Problem selbst noch unklar, kann genau seine Untersuchung der nächste sinnvolle Schritt sein. Für eine erste Klärung braucht es weniger Evidenz als für einen produktiven Einsatz. Formulieren Sie deshalb auch, welche Ressourcen oder Konsequenzen der anstehende Beschluss bindet.

Vertiefung zum Übergang von einer Idee zu einem prüfbaren Vorhaben: Wann wird aus einer KI-Idee ein belastbares Vorhaben?

Sieben Prüfdimensionen für den ersten Überblick

Die folgenden Dimensionen sind eine eigene Synthese aus den Bausteinen des Lernpfads und den Quellen dieses Beitrags. Ihre Nummerierung dient der Orientierung, sie legt keine allgemeingültige Bearbeitungsreihenfolge fest. Der erste Durchgang soll breit genug sein, um wesentliche Lücken und mögliche Stopper sichtbar zu machen; erst danach wird gezielt vertieft.

Sieben gleichwertige Prüfdimensionen rund um die nächste Projektentscheidung: Problem und Entscheidung, Ausgangslage und Alternativen, Daten und Information, technische und betriebliche Machbarkeit, Organisation Verantwortung und Governance, Evidenz und Bewertung sowie Nutzen und Wirtschaftlichkeit; Risiko wirkt als Querschnittslinse.
Sieben Prüfdimensionen bilden den gemeinsamen Prüfraum. Risiko wirkt querschnittlich; vertieft wird dort, wo die nächste entscheidungsrelevante Unsicherheit liegt.
Prüfdimension Kernfrage Was zunächst festgehalten wird
1. Problem, Ziel und Entscheidungskontext Was soll für wen besser werden? Wo greift die Lösung ein? Welcher Beschluss steht an? Problem, gewünschte Veränderung und Entscheidungsumfang.
2. Ausgangslage und realistische Alternativen Was geschieht heute? Welche einfacheren oder anderen Lösungen kommen infrage? Wogegen vergleichen wir? Bestehender Ablauf, Alternativen und geeigneter Vergleichsmaßstab.
3. Daten und Information Ist die Nutzung für den vorgesehenen Zweck geklärt? Sind Bedeutung, Abdeckung, Zeitpunkt, Zugriff und Güte ausreichend? Datenbasis, Nutzungsrahmen und wesentliche Eignungslücken.
4. Technische und betriebliche Machbarkeit Kann der Ansatz die Aufgabe lösen? Kommt das Ergebnis rechtzeitig an? Sind Fehler, Ausnahmen und Rückfallwege beherrschbar? Technischer Befund und Voraussetzungen für die reale Nutzung.
5. Organisation, Verantwortung und Governance Wer entscheidet, prüft und handelt? Reichen Befugnisse, Fähigkeiten und Kapazitäten, und welche verbindlichen Grenzen gelten? Zuständigkeiten, Entscheidungsrechte, Freigaben und fehlende Voraussetzungen.
6. Evidenz und Bewertung Welche Aussagen sind tatsächlich belegt, wie weit tragen die Befunde und welcher Vergleich ist für den nächsten Beschluss nötig? Befund, Geltungsbereich, Aussagegrenze und fehlender Nachweis.
7. Nutzen und Wirtschaftlichkeit Wie entsteht zusätzlicher Nutzen? Welche Kosten und Nebenwirkungen stehen gegenüber? Welche Annahme kann die Bewertung kippen? Wirkungskette, grobe Plausibilität und entscheidende Nutzen-/Kostenannahmen.

1. Problem, Ziel und Entscheidungskontext

Die erste Dimension verhindert, dass eine technisch interessante Lösung bereits als feststehender Lösungsweg behandelt wird. Problem, gewünschte Veränderung und der jetzt anstehende Projektbeschluss werden getrennt festgehalten.

Schablone

Im heutigen Ablauf entsteht [Problem]. Für [Betroffene] soll sich [Handlung oder Ergebnis] verbessern. Als Lösungswege betrachten wir [Alternativen]. Jetzt steht die Entscheidung über [konkreter nächster Schritt] an.

Nordwerk: Im heutigen Ablauf werden spindelbezogene Störungen teilweise erst spät erkannt. Für die Instandhaltung soll sich die Entscheidung zwischen zusätzlicher Diagnose, geplanter Wartung und Weiterbetrieb verbessern. Als Lösungswege betrachten wir die bestehende Überwachung, einfachere Warnregeln und ergänzende Modellhinweise. Jetzt ist zu entscheiden, welcher Schritt statt des dreimonatigen Piloten gerechtfertigt ist. Vorgeschlagen wird zunächst die Vorbereitung zweier begrenzter Vorprüfungen. Problem und Entscheidungsrahmen sind damit eingegrenzt; ihre Durchführungsvoraussetzungen bleiben gesondert zu klären.

Vertiefung: Von der KI-Idee zur Entscheidungsfrage: Was soll tatsächlich besser werden?

2. Ausgangslage und realistische Alternativen

Eine neue Lösung braucht einen nachvollziehbaren Vergleich. Die Baseline ist dabei der heutige Ausgangs- und Vergleichszustand: der reale Prozess einschließlich menschlicher Prüfung, bestehender Signale, Aufwand und Folgen. Ein einfacherer technischer Ansatz kann zusätzlich als Referenz dienen, ersetzt diese betriebliche Baseline aber nicht automatisch.

Schablone

Heute wird [Aufgabe oder Entscheidung] durch [bestehender Ablauf] unterstützt. Als Baseline halten wir [heutiger Zustand] fest; zusätzlich betrachten wir [realistische Alternative oder Referenzansatz]. Ein neuer Ansatz muss bei [entscheidungsrelevante Wirkung] einen zusätzlichen Vorteil zeigen.

Nordwerk: Heute wird die Entscheidung über Diagnose, Wartung oder Weiterbetrieb durch bestehende Überwachung, fachliche Untersuchung und Erfahrungswissen unterstützt. Als Baseline halten wir diesen heutigen Ablauf mit seinen verfügbaren Hinweisen und Reaktionsmöglichkeiten fest; zusätzlich betrachten wir eine einfache Warnregel als technischen Referenzansatz. Ein neues Modell muss gegenüber dem bestehenden Vorgehen einen zusätzlichen, praktisch nutzbaren Vorteil bei der rechtzeitigen Instandhaltungsentscheidung zeigen.

Vertiefung: Ohne Baseline beweist selbst ein guter PoC erstaunlich wenig.

3. Daten und Information

Daten sind nicht allein deshalb geeignet, weil sie vorhanden, sauber oder umfangreich sind. Entscheidend ist zunächst, ob sie die konkrete Frage unter den vorgesehenen Bedingungen ausreichend abbilden. [2] Ob und unter welchen Bedingungen sie dafür genutzt werden dürfen, ist eine separate Nutzungs-, Freigabe- oder Rechtsfrage.

Schablone

Für [Entscheidung oder Modellaufgabe] benötigen wir Informationen über [relevante Sachverhalte]. Vorhanden sind [Datenquellen] unter [Bedingungen]. Offen sind [Abdeckung, Bedeutung, Zugriff, Zeitpunkt, Qualität oder Nutzungsfragen].

Nordwerk: Für die Prüfung möglicher spindelbezogener Störungen benötigen wir Informationen über Maschinenzustände, Betriebsbedingungen und dokumentierte Störungsereignisse. Vorhanden sind historische Zustands- und Ereignisdaten, überwiegend von einer älteren Spindelgeneration und unter den damaligen Betriebsbedingungen. Offen sind die Abdeckung neuerer Spindeln, die Vergleichbarkeit von Sensorik und Betriebszuständen, die Aussagekraft der Ereigniszuordnung sowie der Datenzugang und die zulässige Nutzung für den geplanten Versuch.

Vertiefung: Gute Daten sind nicht für jede Entscheidung brauchbar

4. Technische und betriebliche Machbarkeit

Technische Machbarkeit beantwortet noch nicht, ob ein Ergebnis im realen Ablauf rechtzeitig, verständlich und handlungsfähig ankommt. Für den nächsten Schritt müssen deshalb technische Leistung und betriebliche Nutzbarkeit gemeinsam betrachtet werden.

Schablone

Der Ansatz muss [technische Aufgabe] unter [reale Bedingungen] ausreichend lösen. Sein Ergebnis muss innerhalb von [notwendiges Zeitfenster] verfügbar und für [Handlung] nutzbar sein. Offen sind [technische oder betriebliche Grenze].

Nordwerk: Der Ansatz muss rechtzeitig interpretierbare Hinweise auf mögliche spindelbezogene Störungen unter den aktuellen Maschinen- und Produktionsbedingungen liefern. Sein Ergebnis muss innerhalb eines noch zu ermittelnden Vorwarnfensters verfügbar und für eine zusätzliche Untersuchung oder geplante Wartung nutzbar sein. Offen sind die Übertragbarkeit des historischen Signals und die Frage, ob bei einer Warnung tatsächlich eine geeignete Maßnahme rechtzeitig möglich wäre.

Vertiefung: Technisch machbar heißt noch lange nicht pilotfähig.

5. Organisation, Verantwortung und Governance

Die organisatorische Seite fragt, ob Menschen Zeit, Fähigkeiten, Informationen und Handlungsmöglichkeiten besitzen. Governance bezeichnet hier den verbindlichen Rahmen für Entscheidungen, Freigaben, Kontrolle und Eskalation: Wer darf was entscheiden, welche Nachweise sind erforderlich, welche Grenzen gelten und wann muss erneut entschieden werden?

Schablone

[Rolle] verantwortet [Aufgabe oder Entscheidung] und benötigt dafür [Befugnis, Kompetenz, Zeit oder Information]. Über [Freigabe] entscheidet [befugte Rolle] auf Grundlage von [Nachweisen]. Bei [Abweichung, Änderung oder Vorfall] folgt [Eskalation oder Neubewertung].

Nordwerk: Die Instandhaltung übernimmt in der Beispielanwendung die fachliche Vorbereitung möglicher Reaktionswege. Bearbeitungsrollen sind zugeordnet; daraus folgen noch keine bestätigten Entscheidungsrechte oder verfügbaren Prüfzeiten. Über Datenverwendung, Prüfauftrag, Versuchsgrenzen und zusätzliche Ressourcen müssen die jeweils befugten Rollen entscheiden. Deren konkrete Mandate und die Prüfkapazität sind noch zu bestätigen. Bei Änderungen der Spindelgeneration, des Einsatzbereichs oder wesentlichen Prüfbedingungen ist eine Neubewertung erforderlich.

Vertiefung: Wer darf eigentlich Ja sagen? Wenn Verantwortlichkeiten ein KI-/Datenvorhaben blockieren

Eine vertiefende Artikelstrecke zu Governance, Freigaben und menschlicher Kontrolle ist vorgesehen. Der nächste Grundlagenbeitrag dazu ist noch ausstehend.

6. Evidenz und Bewertung

Evidenz bezeichnet hier Beobachtungen, Daten oder Prüfergebnisse, die eine konkrete Aussage tatsächlich stützen. Entscheidend ist nicht nur, ob ein positiver Befund vorliegt, sondern welche Aussage er unter welchen Bedingungen trägt und welche gerade nicht. Eine dokumentierte Prozessbeobachtung kann beispielsweise eine Kapazitätsfrage beantworten, ohne damit Prognoseleistung oder wirtschaftliche Wirkung zu belegen.

Schablone

Wir haben [Befund] unter [Bedingungen] beobachtet. Das stützt die Aussage [Aussage] für [Geltungsbereich]. Nicht belegt ist damit [weitergehende Aussage]. Für die nächste Entscheidung fehlt noch [Vergleich oder Nachweis].

Nordwerk: Wir haben im retrospektiven PoC unter historischen Bedingungen mit überwiegend älteren Spindeln ein technisch interessantes Signal beobachtet. Das stützt die Aussage, dass dieser Ansatz unter den geprüften Bedingungen Hinweise auf später dokumentierte Störungen liefern kann – zunächst nur für den untersuchten historischen Kontext. Nicht belegt sind damit die Prognoseleistung an neueren Spindeln, die Handlungsfähigkeit im Betrieb oder vermiedener Schaden. Neue positive Ergebnisse der Vorprüfungen liegen noch nicht vor. Die präzisere Entscheidungsfrage erweitert die Aussage des PoC nicht. Für die Entscheidung über einen Folgeversuch fehlen ein Daten- und Bedingungsabgleich sowie eine begrenzte Prüfung möglicher Reaktionswege gegenüber dem heutigen Ablauf.

Vertiefung: Welche Unsicherheiten darf ein KI-PoC bewusst offenlassen?

7. Nutzen und Wirtschaftlichkeit

Wirtschaftlichkeit beginnt nicht erst nach einem erfolgreichen Pilot. Schon im Frühscreening sollte plausibel sein, wie zusätzlicher Nutzen gegenüber Ausgangslage und Alternativen überhaupt entstehen könnte und welche Aufwände oder Nebenwirkungen ihm gegenüberstehen. Mit wachsender Evidenz wird diese erste Plausibilität konkretisiert.

Schablone

Zusätzlicher Nutzen entsteht, wenn [Wirkungskette]. Dem stehen [Aufwand, Kosten oder Nebenwirkungen] gegenüber. Besonders unsicher ist [Annahme]; bei [Bandbreite oder Schwelle] verändert sich die Bewertung.

Nordwerk: Zusätzlicher Nutzen entsteht, wenn ein Modellhinweis rechtzeitig erkannt wird, eine geeignete Instandhaltungsmaßnahme ermöglicht und damit gegenüber dem heutigen Vorgehen tatsächlich vermeidbarer Schaden reduziert wird. Dem stehen Prüf-, Integrations-, Betriebs- und mögliche Maßnahmenkosten gegenüber. Besonders unsicher ist die wirksame Reaktionsquote; bei einer noch projektspezifisch zu bestimmenden Wirtschaftlichkeitsschwelle kann die Bewertung von tragfähig zu nicht tragfähig wechseln.

Vertiefung: Wenn der Business Case an einer Zahl kippt, die im PoC gar nicht gemessen wird

Das Frühscreening ist breit, die Vertiefung selektiv

Der erste Durchgang ist ein Frühscreening: eine kurze, breite Sichtung aller sieben Prüfdimensionen. Ziel ist noch keine vollständige Prüfung. Festgehalten werden bekannte Befunde, Annahmen, relevante Lücken und mögliche Stopper. Ein begründetes „für diesen Schritt nicht relevant“ ist möglich; ein leeres Feld kann dagegen eine übersehene Frage verbergen.

Nach dieser breiten Sichtung richtet sich die Vertiefung nach der Unsicherheit, deren Klärung die nächste Entscheidung am stärksten verändern kann. Alternativen ohne KI oder neue Technologie gehören ausdrücklich zur Prüfung. [3] Offene Nutzungs-, Schutz- oder Freigabefragen müssen im dafür zuständigen Rahmen geklärt werden.

Nach einem ersten Bewertungsdurchlauf sollten mindestens feststehen: der Umfang des anstehenden Beschlusses, wesentliche Befunde und Annahmen, kritische offene Unsicherheiten, die priorisierte nächste Lernfrage, ein begrenzter Prüfauftrag, relevante Risiken und Freigaben sowie der nächste Entscheidungspunkt.

Risiko begleitet jede Prüfdimension

Risiko wird als Querschnittslinse in allen sieben Prüfdimensionen mitgeführt. Ein relevantes Schadensszenario kann aus Datenverwendung, technischem Verhalten, menschlicher Nutzung, organisatorischen Lücken oder wirtschaftlichen Fehlanreizen entstehen. Für materielle Risiken werden deshalb mindestens Ursache oder Auslöser, mögliche Folgen, Grundlage und Unsicherheit der Einschätzung, Schutzmaßnahmen, verbleibendes Risiko und Eingriffs- beziehungsweise Abbruchpunkt festgehalten. [4]

Risikofrage Was festgehalten wird
Was kann schiefgehen? Auslöser, betroffene Personen oder Güter und mögliche Folgen.
Wie belastbar ist die Einschätzung? Mögliche Schwere, Eintrittseinschätzung, Bezugsbedingungen und Unsicherheit.
Wie wird begrenzt? Maßnahme, verantwortliche Rolle und erwartete Risikominderung.
Was bleibt offen? Verbleibendes Risiko und Vertretbarkeit für genau den geplanten Schritt.
Wann wird eingegriffen? Frühindikator, Eskalation, Pause oder Abbruch.

Nordwerk: Ein falscher Spindelhinweis könnte im späteren Einsatz einen unnötigen Eingriff auslösen. Aktuell wird jedoch eine szenariobasierte Ablaufprüfung ohne Maschineneingriff vorbereitet. Für diesen Schritt bleiben ein ungeeigneter Prüfweg, unzulässige Datennutzung und unverhältnismäßiger Prüfaufwand relevante Risiken. Die Szenarien können mögliche Reaktionen untersuchen, belegen aber weder die tatsächliche Reaktionsquote im Betrieb noch verhinderten Schaden.

Vertiefung zu Fehlerarten und ihren Folgen: 92 % Genauigkeit: Würden Sie damit einen Prozess automatisieren?

Vertiefungen zu Fehler- und Risikoklassen sowie zur Frage, wann aus einem Vorhaben ein Governance-Thema wird, sind als eigene Beiträge vorgesehen und derzeit ausstehend.

Eine kritische Voraussetzung darf nicht durch positive Befunde in anderen Dimensionen verdeckt werden. Ein Gesamtscore ist für die hier vorgeschlagene Prüfung deshalb nicht vorgesehen.

Welche offene Frage kommt als Nächstes?

Die längste Liste von Wissenslücken bestimmt noch keine sinnvolle Priorität. Prüfen Sie einen Kandidaten anhand von vier Fragen:

Kriterium Gegenprobe
Entscheidungswirkung Was würden wir bei einem günstigen Befund anders entscheiden als bei einem ungünstigen?
Risiko und Abhängigkeiten Muss diese Frage geklärt sein, damit weitere Arbeit vertretbar oder überhaupt aussagekräftig wird?
Klärbarkeit Kann der vorgeschlagene Prüfschritt die benötigte Information tatsächlich liefern?
Aufwand und Zeit Ist die Klärung ihren Ressourceneinsatz und die mögliche Verzögerung wert?

Diese Auswahl ist eine qualitative Entscheidungshilfe; sie berechnet keinen objektiven Wert zusätzlicher Information.

Schablone für die Priorität

Wir prüfen zuerst [Unsicherheit], weil der Befund unsere Entscheidung zwischen [Optionen] verändern könnte. [Prüfweg] kann sie ausreichend klären. Voraussetzung dafür ist [Abhängigkeit]; vertretbar ist dafür [Aufwand oder Zeitrahmen].

Nordwerk: Wir bereiten vorrangig die Prüfung vor, ob bei einem rechtzeitigen Hinweis überhaupt eine geeignete Instandhaltungsreaktion möglich wäre, weil ein ungünstiger Befund die Entscheidung zwischen begrenzter Weiterprüfung, Rescope und Stop verändern könnte. Eine Ablaufprüfung mit repräsentativen Störungsszenarien kann diese Möglichkeit zunächst klären. Für die Durchführung sind geeignete Szenarien, Zuständigkeiten, Prüfkapazität und ein vertretbares Aufwandlimit festzulegen. Das erforderliche Vorwarnfenster ist ein Ergebnis der Prüfung. Parallel planen wir den Abgleich der Daten und Bedingungen neuerer Spindeln, damit der spätere technische Versuch aussagefähig geplant werden kann. Kapazität bleibt mangels bekanntem Hinweisvolumen zunächst eine Szenariofrage.

Manchmal gehört ein schnell prüfbarer möglicher Stopper nach vorn. Manchmal lohnt es sich, zwei eng verbundene Fragen parallel zu untersuchen. Eine kritische Frage, die im vorgesehenen Zeitraum kaum beobachtbar ist, verlangt einen anderen Prüfweg, einen engeren Beschluss oder eine begründete Zurückstellung.

Neue Befunde verändern frühere Annahmen

Die Prüfung folgt in wiederholten Lern- und Entscheidungsschleifen. Neue Befunde können frühere Annahmen verändern und deshalb einen Rücksprung auslösen. Eine Datenprüfung kann zeigen, dass die ursprüngliche Entscheidungsfrage mit den verfügbaren Informationen nicht beantwortbar ist. Ein Modelltest kann technisch erfolgreich sein und trotzdem sichtbar machen, dass im realen Prozess keine rechtzeitige Handlung möglich ist. Eine wirtschaftliche Gegenprobe kann wiederum zeigen, dass eine technisch sinnvolle Verbesserung unter plausiblen Kosten- oder Nutzenannahmen keinen ausreichenden zusätzlichen Wert erzeugt. [4][5]

Dann wird nicht einfach mit dem nächsten Prüfschritt fortgefahren. Entscheidungsfrage, Einsatzbereich, Datenbasis, Prüfdesign oder wirtschaftliche Annahmen werden dort neu bewertet, wo der neue Befund ihre Grundlage verändert. Rescope ist deshalb kein Sonderfall am Ende eines Vorhabens, sondern kann ein normales Ergebnis eines Lernschritts sein.

Neuer Befund Typische Rückkopplung
Problem oder gewünschte Wirkung war falsch oder zu breit gefasst Entscheidungsfrage und Einsatzbereich neu eingrenzen.
Daten bilden relevante Bedingungen oder Fälle nicht ausreichend ab Datenbasis, Geltungsbereich oder Prüfdesign anpassen.
Technischer Ansatz funktioniert, aber nicht rechtzeitig oder betrieblich nutzbar Lösungsansatz, Prozessintegration oder Anwendungsfall neu bewerten.
Evidenz trägt eine weitergehende Aussage nicht Beschluss enger fassen oder zusätzlichen Nachweis planen.
Organisation, Befugnisse oder Governance reichen nicht aus Voraussetzungen schaffen oder Umfang begrenzen.
Risiko ist für den geplanten Schritt nicht vertretbar Schutzmaßnahmen, Versuchsgrenze oder Vorhaben ändern.
Wirtschaftlichkeit kippt unter plausiblen Annahmen Ziel, Einsatzumfang, Kostenstruktur oder Fortführung neu bewerten.
Der Prüfschritt kann die relevante Unsicherheit nicht beantworten Lernfrage oder Prüfmethodik ändern, statt den Versuch unverändert fortzusetzen.

Diese Zuordnung zeigt typische Rückkopplungen. Ein Befund kann mehrere Dimensionen gleichzeitig verändern; die breite Sichtung hilft dabei, solche Folgewirkungen über die gerade untersuchte Teilfrage hinaus zu erkennen.

Aus der Priorität wird ein begrenzter Prüfauftrag

Gezieltes Testen von Annahmen braucht passende Methoden und vorab erkennbare Entscheidungskriterien. Änderungen am Versuch sollten dokumentiert werden, damit klar bleibt, welche Fassung welche Ergebnisse erzeugt hat. [5]

Schablone für den nächsten Erkenntnisschritt

Wir müssen klären, ob [Annahme] trägt. Dafür beobachten wir [Merkmal oder Verhalten] unter [Bedingungen] und vergleichen mit [Maßstab]. Eine hinreichende Antwort erkennen wir an [Kriterium]. Die Prüfung endet bei [Erkenntnis-, Aufwand- oder Abbruchgrenze]. Danach entscheiden [Verantwortliche] über [nächster Beschluss].

Nordwerk: Wir müssen klären, ob ein rechtzeitiger Modellhinweis eine geeignete zusätzliche Diagnose oder Wartungsreaktion ermöglichen könnte. Dafür planen wir, in repräsentativen Störungsszenarien die vorgesehenen Arbeitsabläufe und Reaktionszeiten unter angenommenen Hinweisbedingungen zu beobachten und mit den heutigen Diagnose- und Instandhaltungswegen zu vergleichen. Eine hinreichende erste Antwort erkennen wir daran, dass erforderliches Vorwarnfenster, möglicher Reaktionsweg und erkennbare Grenzen dokumentiert sind. Vor der Durchführung sind Datennutzung, Mandat, Prüfkapazität und Aufwandlimit zu bestätigen. Die Prüfung endet spätestens am dann vereinbarten Aufwandslimit; die reale Kapazität bei unbekanntem Hinweisvolumen sowie verhinderte Schäden bleiben unbelegt. Danach entscheiden die zuständigen Projekt- und Betriebsverantwortlichen über einen begrenzten nächsten Versuch oder eine Anpassung.

Trennen Sie dabei drei mögliche Lernziele:

Lernziel Mögliche Aussage Was daraus noch nicht folgt
Technischer Nachweis Der Ansatz liefert unter benannten Bedingungen ein brauchbares Signal. Dass Menschen daraus rechtzeitig handeln oder Nutzen entsteht.
Betriebliche Nutzbarkeit Datenwege, fachliche Prüfung und Reaktion funktionieren im betrachteten Ablauf. Dass zusätzliche Wirkung gegenüber dem bisherigen Vorgehen nachgewiesen ist.
Wirkung und wirtschaftlicher Beitrag Ein geeigneter Vergleich liefert Evidenz zur zusätzlichen Wirkung und zum dazugehörigen Aufwand. Dass der Befund auf andere Kontexte unverändert übertragbar ist.

Technische Bewertung und Wirkungsbewertung stellen unterschiedliche Anforderungen an die Evidenz. Für Wirkung braucht es einen nachvollziehbaren Vergleich; die erreichbare Aussage hängt unter anderem von Beobachtungsumfang und Studiendesign ab. [6]

Aus meiner eigenen Arbeit an einem Chatbot für Datenanalyse kenne ich eine frühe Verschiebung dieser Fragen: Ein funktionierender Prototyp entstand schnell, während Nutzungsziel, Anforderungen und Bewertung teilweise parallel weiterentwickelt wurden. Bis daraus eine belastbare Entscheidungsgrundlage wurde, mussten diese Klärungen nachgeholt werden. Deshalb würde ich die technische Lernfrage und ihren Entscheidungsanschluss von Beginn an gemeinsam festhalten.

Wirtschaftlichkeit beginnt beim Frühscreening

Zu Beginn genügt häufig eine grobe Gegenprobe: Wie könnte hier relevanter zusätzlicher Nutzen entstehen, und welcher Aufwand steht ihm absehbar gegenüber? Später wird diese Einschätzung mit neuen Befunden konkretisiert.

Frühe Plausibilität Vertiefung mit wachsender Evidenz
Größenordnung des Problems und möglicher Verbesserungshebel. Zusätzlicher Nutzen gegenüber Ausgangslage und Alternativen.
Grober Entwicklungs-, Integrations- und Betriebsaufwand. Beobachtete Kosten einschließlich Prüfung, Schulung, Korrektur und laufender Betreuung.
Benannte Annahmen zur Nutzung und Wirkung. Plausible Bandbreiten, Sensitivitäten und entscheidungsrelevante Schwellen.

Eine Sensitivitätsanalyse zeigt, wie sich das Ergebnis verändert, wenn eine unsichere Annahme variiert wird. Sie macht damit sichtbar, wie stark die Bewertung von dieser Annahme abhängt; sie bestätigt aber nicht, dass die Annahme tatsächlich zutrifft. [7]

Schablone für die wirtschaftliche Unsicherheit

Zusätzlicher Nutzen entsteht, wenn [Wirkungskette]. Besonders unsicher ist [Annahme]. Bei [Bandbreite oder Schwelle] verändert sich die Bewertung. Deshalb brauchen wir vor [Bindung weiterer Ressourcen] Evidenz zu [Frage].

Nordwerk: Zusätzlicher Nutzen entsteht, wenn ein rechtzeitiger Spindelhinweis zu einer geeigneten Maßnahme führt und dadurch gegenüber der heutigen Instandhaltung Schaden vermieden oder reduziert wird. Besonders unsicher ist der Anteil tatsächlich wirksamer Reaktionen. Unterhalb der aus den projektspezifischen Kosten- und Nutzenannahmen abzuleitenden Wirtschaftlichkeitsschwelle wäre die betrachtete Lösung nicht tragfähig. Deshalb brauchen wir vor einer breiteren Einführung Evidenz zur realen Reaktionsfähigkeit, zur zusätzlichen Wirkung gegenüber der Baseline und zum gesamten Prüf- und Maßnahmenaufwand.

Ein begrenzter Lernschritt kann gerechtfertigt sein, obwohl der spätere Business Case noch offen ist, wenn seine Erkenntnis eine relevante Entscheidung vorbereiten kann. Bereits angefallene Kosten sollten die Entscheidung über den nächsten Ressourceneinsatz nicht beeinflussen. [7] Zugleich bindet auch weitere Klärung Zeit und Kapazität; ihr erwarteter Erkenntnisgewinn gehört deshalb in die Abwägung.

Fünf Beschlüsse – jeweils mit einer Begründung

Beschluss Was feststehen sollte
Weiterführen Welcher begrenzte nächste Schritt durch Befunde, erwarteten Erkenntnisgewinn und vertretbare Risiken gerechtfertigt ist.
Rescope – neu eingrenzen Was an Ziel, Einsatzbereich oder Lösungsansatz verändert wird und weshalb.
Voraussetzungen zuerst Welche Grundlage aktiv geschaffen wird, wer sie verantwortet und wann erneut entschieden wird.
Defer – vertagen Warum derzeit keine Fortsetzung erfolgt und welcher Termin oder Auslöser eine Wiedervorlage begründet.
Stop – beenden Warum für das geprüfte Vorhaben kein gerechtfertigter weiterer Schritt erkennbar ist.

Diese fünf Beschlüsse entsprechen auch der Einordnung im Beitrag Wann ist Nicht-Weiterführen das beste Ergebnis eines KI-Projekts?. Gezieltes Verbessern ist dabei eine mögliche Maßnahme, kein zusätzlicher Beschluss: Soll bei unverändertem Einsatzzweck eine entscheidungsrelevante Schwäche als Voraussetzung für den nächsten Versuch behoben werden, gehört das zu Voraussetzungen zuerst. Wird das Vorhaben in Ziel, Einsatzbereich oder Lösungsansatz neu ausgerichtet, ist Rescope passend.

Ein begrenzter weiterer Prüfschritt kann als Weiterführen gerechtfertigt sein, wenn er eine entscheidungsrelevante Unsicherheit klären kann und der erwartete Erkenntnisgewinn Aufwand und Risiken rechtfertigt. Dafür müssen Prüffrage, Antwortkriterium und Aufwand- oder Abbruchgrenze feststehen. Sind die Voraussetzungen seiner Durchführung noch ungeklärt, bezeichnet „Voraussetzungen zuerst“ zunächst deren aktive Klärung und die Vorbereitung des Prüfauftrags. Eine Anpassung oder Verbesserung allein rechtfertigt weder weitere Versuche noch einen Pilotstart; über den nächsten Schritt wird anhand der Befunde erneut entschieden.

Beschlüsse können Bedingungen verbinden: Ein engerer Einsatz kann beispielsweise zunächst Daten- oder Rollenklärung benötigen. „Voraussetzungen zuerst“ bezeichnet aktive Grundlagenarbeit; „Defer“ eine begründete Zurückstellung. Stop betrifft das geprüfte Vorhaben. Das zugrunde liegende Problem und alternative Lösungen bleiben davon getrennt.

Schablone für den Beschluss

Wir entscheiden uns für [Beschluss], weil [tragende Befunde]. Dafür müssen [Voraussetzungen] erfüllt sein. Offen bleibt [Unsicherheit]. Für diesen Schritt ist sie [vertretbar oder begrenzend], weil [Begründung]. Neu entschieden wird bei [Befund, Termin oder Auslöser].

Nordwerk: Wir entscheiden uns für Voraussetzungen zuerst. Der historische PoC zeigt ein technisch interessantes Signal, belegt aber weder seine Übertragbarkeit noch eine wirksame Reaktion im neuen Einsatzkontext. Der automatische Wartungseinsatz bleibt entsprechend der vorherigen Rescope-Einordnung auf einen möglichen fachlich geprüften Hinweis eingegrenzt. Zunächst werden Daten- und Bedingungsabgleich sowie Ablaufprüfung vorbereitet. Ihre Durchführung wird erst beauftragt, wenn Datennutzung, Mandat, Prüfkapazität, ein vertretbares Aufwandlimit und plausibler Erkenntniswert bestätigt sind. Der dreimonatige Pilot bleibt zurückgestellt. Offen bleiben Prognoseleistung, reales Hinweisvolumen, wirksame Reaktionsquote und zusätzlich vermiedener Schaden. Diese Fragen müssen die Vorprüfungen noch nicht beantworten; sie sollen zunächst klären, ob ein geeigneter Folgeversuch sinnvoll planbar ist. Neu entschieden wird über ihre Durchführung nach Bestätigung der Bedingungen und anschließend anhand ihrer Ergebnisse über einen möglichen Folgeversuch. Bei unzulässiger Nutzung, überschrittenem Aufwandlimit oder fehlendem vertretbaren Prüfweg wird früher pausiert und neu entschieden.

Vertiefung: Wann ist Nicht-Weiterführen das beste Ergebnis eines KI-Projekts?

Zurück zu Nordwerk: Welchen nächsten Schritt würden Sie freigeben?

Ein dreimonatiger Pilot ist noch kein vollständiger Prüfauftrag. Sein Zeitraum sagt nichts darüber, welche Fragen er belastbar beantworten wird. Bei wenigen relevanten Störungen kann ein Versuch nützliche Prozessbeobachtungen liefern, während die Aussage zur Prognoseleistung und verhinderten Schäden begrenzt bleibt. Viele Messwerte zu wenigen Störungen beheben diese Ereignislücke nicht automatisch.

Meine Antwort folgt den vier Fragen vom Anfang. Die Beispiele und Schablonen werden dabei zu einem zusammenhängenden Beschluss verdichtet:

Frage Meine Antwort für Nordwerk
1. Entscheidung Voraussetzungen zuerst: Den vorgeschlagenen dreimonatigen Pilot zurückstellen. Zunächst Daten- und Bedingungsabgleich sowie Ablaufprüfung vorbereiten. Ihre Durchführung erst beauftragen, wenn Datennutzung, Mandat, Prüfkapazität, ein vertretbares Aufwandlimit und plausibler Erkenntniswert bestätigt sind. Erst die Ergebnisse tragen die Entscheidung über einen möglichen enger begrenzten Folgeversuch.
2. Priorität Kann die Instandhaltung bei einem rechtzeitigen Hinweis überhaupt sinnvoll reagieren? Ein ungünstiger Befund würde die Nutzenbasis des vorgeschlagenen Einsatzes unabhängig von der endgültigen Modellleistung infrage stellen. Die Ablaufprüfung kann diese Frage früh klären und zugleich das notwendige Vorwarnfenster bestimmen. Der Daten- und Bedingungsabgleich läuft parallel, weil ein späterer Versuch nur sinnvoll ist, wenn sich ein rechtzeitiger Hinweis unter den aktuellen Spindelbedingungen überhaupt aussagefähig untersuchen lässt.
3. Prüfpaket Untersuchung 1 – Daten- und Bedingungsabgleich: Daten, Sensorik und Betriebsbedingungen der neueren Spindeln abgleichen. Das prüft, ob ein rechtzeitiger, fachlich interpretierbarer Hinweis im aktuellen Kontext überhaupt aussagefähig untersucht werden kann. Die Prognoseleistung bleibt bei fehlenden relevanten Ereignissen offen. Untersuchung 2 – Ablaufprüfung mit Kapazitätsszenarien: An repräsentativen Störungsszenarien geeignete Maßnahmen, benötigte Vorwarnzeit, Zuständigkeit und Zusatzaufwand untersuchen; mit bestehenden Signalen und Handlungen vergleichen. Kapazität wird nur unter transparent angenommenen Hinweisvolumina betrachtet, weil das reale Volumen an neueren Spindeln noch unbekannt ist.
4. Grenze Offen bleiben Prognoseleistung an neueren Spindeln, wirksame Reaktionsquote im Betrieb, reales Hinweisvolumen und zusätzlich verhinderter Schaden. Pausieren und neu entscheiden, wenn die Datennutzung nicht zulässig ist oder der Aufwand die vereinbarte Grenze überschreitet. Zeigt der Datenabgleich keinen aussagefähigen Prüfweg in vertretbarem Aufwand oder die Ablaufprüfung trotz rechtzeitigem Hinweis keine geeignete Reaktion, ist der bisher vorgesehene Folgeversuch nicht gerechtfertigt. Je nach Ursache werden Umfang oder Voraussetzungen verändert, das Vorhaben begründet vertagt oder beendet.

So greifen die Schablonen ineinander: Die Priorität benennt den möglichen frühen Stopper auf der Reaktionsseite. Der Datenabgleich läuft als notwendige Parallelprüfung, weil er die Aussagefähigkeit eines späteren Versuchs bestimmt. Das Prüfpaket untersucht damit zwei eng gekoppelte Voraussetzungen derselben Wirkungskette. Die Beschlussschablone hält fest, warum diese Vorprüfungen gerechtfertigt sind, welche Grenzen gelten und wann neu entschieden wird.

Ein günstiger Befund wäre die Grundlage für die Entscheidung über einen anschließenden begrenzten Versuch mit Prüfhinweisen für Fachleute. Dessen Start setzt zusätzlich ausreichend geklärte technische Grundlagen, Zuständigkeiten und Risiken voraus. Die Vorprüfungen belegen weder die Prognoseleistung noch einen verhinderten Schaden; diese Fragen benötigen eigene passende Evidenz.

Unter anderen Voraussetzungen können andere Beschlüsse begründet sein: Sind geeignete aktuelle Daten, Reaktionsmöglichkeiten, Befugnisse und Ressourcen bereits bestätigt, könnte ein ausreichend abgegrenzter Versuch als Weiterführen gerechtfertigt sein. Für die hier beschriebene Nordwerk-Situation liegen diese Bestätigungen noch nicht vor. Ein günstiger Befund der Vorprüfungen ersetzt die gesonderte Entscheidung über den Folgeversuch nicht.

Prüfen Sie nun Ihre vier Zeilen: Haben Sie den Umfang Ihres Beschlusses eingegrenzt? Kann Ihr Prüfpaket die priorisierte Frage beantworten? Ist der Vergleich sichtbar? Und nennen Sie, welche Aussage danach weiterhin nicht gedeckt wäre?

Artikel ausstehend: Ein separater Anwendungsartikel soll diese Prüfung vollständig durchspielen – vom ausgefüllten Ausgangspunkt über die Auswahl des Prüfpakets bis zum begründeten Beschluss. Hier steht zunächst die gemeinsame Bewertungslogik im Mittelpunkt.

Die Logik übertragen, die Prüftiefe anpassen

Die Prüflogik soll auch bei anderen KI- und Datenvorhaben helfen. Der folgende Übertrag zeigt an einem Anschauungsbeispiel, welche Fragen und Schablonen sich wiederverwenden lassen und welche Inhalte an die Anwendung angepasst werden müssen. Ein Assistent für technische Wissensrecherche ist eine von vielen möglichen Anwendungen. Die sieben Prüfdimensionen bleiben erhalten; ihre konkreten Fragen und Nachweise verändern sich:

Perspektive Spindelhinweise Technische Wissensrecherche
Gewünschte Veränderung Bessere Diagnose- und Instandhaltungsentscheidungen. Relevante Informationen schneller und verlässlich finden.
Alternative Bestehende Überwachung und Diagnose. Verbesserte Suche, Dokumentpflege oder geänderter Rechercheprozess.
Mögliche frühe Prüffrage Trägt das Signal unter aktuellen Bedingungen? Sind geeignete, aktuelle Quellen zugänglich und für die Nutzung freigegeben?
Betrieblicher Anschluss Rechtzeitige geeignete Reaktion. Prüfbarkeit der Antwort und vertretbarer Kontrollaufwand.
Wirkungsfrage Zusätzlicher Vorteil nach Prüf- und Eingriffsaufwand. Entlastung bei ausreichender Ergebnisqualität nach Prüf- und Korrekturaufwand.

Diese Beispiele zeigen mögliche Prüfhypothesen; ihre Reihenfolge hängt von Anwendung und anstehendem Beschluss ab. Retrieval-Augmented Generation (RAG) bezeichnet einen Ansatz, bei dem eine generative KI zusätzlich auf gezielt abgerufene externe Informationen zurückgreift, um ihre Antwort auf diesen Kontext zu stützen. RAG wäre eine mögliche Lösung für den zweiten Fall; die Wahl dieses Ansatzes müsste selbst geprüft werden.

Gut übertragbar sind die Mechanik der Bewertung und die Schablonen: Entscheidung eingrenzen, alle sieben Dimensionen sichten, Befund und Annahme unterscheiden, eine entscheidungsrelevante Unsicherheit wählen, einen passenden Prüfauftrag formulieren und den nächsten Beschluss mit Bedingungen begründen. Beim Rechercheassistenten würden etwa Quellenzugang und Kontrollaufwand an die Stelle von Sensordaten und Wartungsreaktionen treten.

Anwendungstyp, Fehlerfolgen und regulatorischer Kontext bestimmen die konkreten Prüfmethoden, Kriterien und erforderlichen Fachfreigaben. Auch die Prüftiefe richtet sich nach dem anstehenden Beschluss: Ein günstiger, reversibler Lernschritt kann mit weniger Evidenz auskommen als eine Freigabe, die hohe Ressourcen bindet, schwer rückgängig zu machen ist oder erhebliche Folgen haben kann. [5] So bleibt die gemeinsame Struktur nutzbar, während Evidenzumfang und Prüfaufwand zur jeweiligen Entscheidung passen. Eine vollständige Anwendung auf einen weiteren Fall folgt in einer separaten Vertiefung.

Die Prüfkette im Überblick

Adaptive Prüfkette für KI-Vorhaben: von der Entscheidungseingrenzung über Screening, priorisierte Unsicherheit, Prüfauftrag, Prüfung und Bewertung zum Beschluss. Rückkopplungen ermöglichen eine Neubewertung und weitere gezielte Prüfzyklen.
Die Prüfkette unterscheidet die Neubewertung innerhalb eines Prüfzyklus vom nächsten, durch einen Beschluss ausgelösten Prüfzyklus. Nicht jeder Beschluss führt zur Weiterprüfung.

Die folgende Kette fasst die Bewertung als wiederholbaren Entscheidungszyklus zusammen. Innerhalb der breiten Sichtung und der anschließenden Vertiefung werden die sieben Prüfdimensionen nach Bedarf bearbeitet; neue Befunde können an jeder Stelle einen Rücksprung auslösen.

  1. Entscheidung eingrenzen: Problem, gewünschte Veränderung, Alternativen und anstehenden Beschluss benennen.
  2. Sieben Prüfdimensionen breit sichten: Bekannte Befunde, wesentliche Annahmen und mögliche Hindernisse festhalten – einschließlich früher Nutzen- und Aufwandplausibilität.
  3. Befunde und Grenzen einordnen: Evidenz und ihre Reichweite, relevante Risiken, Freigaben und Verantwortlichkeiten sichtbar machen.
  4. Nächste Unsicherheit priorisieren: Entscheidungswirkung, Risiko und Abhängigkeiten, Klärbarkeit sowie Aufwand und Zeit gegeneinander abwägen.
  5. Begrenzten Prüfauftrag formulieren: Lernfrage, Beobachtung, Vergleich, Antwortkriterium, Verantwortliche und Prüfgrenze festlegen.
  6. Prüfen und Bewertung aktualisieren: Neue Befunde zurückführen; betroffene Annahmen, Prüfdimensionen, Wirkungskette, Risiken und Wirtschaftlichkeit erneut beurteilen.
  7. Beschluss begründen: Weiterführen, Rescope, Voraussetzungen zuerst, Defer oder Stop mit Bedingungen und verbleibender Unsicherheit festhalten.

Schritt 7 führt bei einer Weiterführung nicht automatisch zu einem „nächsten Reifegrad“. Der neue Beschluss bestimmt, welche Dimension als Nächstes vertieft, neu eingegrenzt oder bewusst nicht weiterverfolgt wird. Bei Defer wird ein Wiedervorlageauslöser festgelegt; bei Stop wird das geprüfte Vorhaben beendet, ohne damit das zugrunde liegende Problem oder alternative Lösungswege für erledigt zu erklären.

Weiterführen, ändern oder stoppen? Was den Beschluss trägt

Ein KI-Vorhaben ist für den nächsten Schritt ausreichend vorbereitet, wenn dessen Zweck, Voraussetzungen, Evidenzbedarf und Grenzen nachvollziehbar sind. Beginnen Sie mit einer breiten Sichtung der sieben Prüfdimensionen. Vertieft werden anschließend diejenigen Fragen, deren Klärung den nächsten Beschluss tatsächlich verändern kann.

Bei Nordwerk heißt das: Den nächsten Versuch an einer klaren Lernfrage ausrichten, aktuelle Einsatzbedingungen und reale Handlungsmöglichkeiten prüfen und die offene Wirkung gegenüber dem bisherigen Prozess ausdrücklich benennen.

Arbeitsmaterial: Die KI-Vorhabenprüfung überträgt die Prüflogik dieses Beitrags in eine Excel-Vorlage. Das durchgearbeitete Nordwerk-Beispiel zeigt drei Entscheidungsstände mit den jeweils nächsten Prüfschritten.

Zusammenfassung

  • Sieben Prüfdimensionen: Problem und Entscheidung; Ausgangslage und Alternativen; Daten und Information; technische und betriebliche Machbarkeit; Organisation, Verantwortung und Governance; Evidenz und Bewertung; Nutzen und Wirtschaftlichkeit.
  • Adaptive Vertiefung: Nach einer breiten Sichtung wird die Unsicherheit vertieft, deren Klärung die nächste Entscheidung am stärksten verändern kann. Neue Befunde können Rücksprünge auslösen.
  • Risiko als Querschnittslinse: Relevante Schadensszenarien, Schutzmaßnahmen, verbleibende Risiken und Eingriffsgrenzen werden in allen Dimensionen mitgeführt.
  • Bewusst begrenzte Aussage: Technisches Signal, betriebliche Nutzbarkeit und tatsächliche Wirkung brauchen jeweils passende Evidenz und dürfen nicht ineinander übersetzt werden, ohne dass der Nachweis trägt.
  • Beschluss: Weiterführen, Rescope, Voraussetzungen zuerst, Defer oder Stop werden mit Befunden, Bedingungen und offenen Unsicherheiten begründet; bei Weiterführung beginnt daraus der nächste Bewertungszyklus.

Einseitige Zusammenfassung herunterladen (PDF · 1 Seite)

Quellen

  1. Google for Developers: Framing an ML problem. Gewünschtes Ergebnis, Modellziel, Output und Erfolgsmessung. Technischer Praxisleitfaden; kein universeller Projektstandard. Originalquelle.
  2. UK Government: The Government Data Quality Framework, 2020. „Why do we need a data quality framework?“, Nutzerbedürfnisse und Trade-offs. Verwendungszweckbezogene Datenqualität; keine Nutzungsfreigabe. Originalquelle.
  3. NIST: AI RMF Playbook, MAP. Kontext, betroffene Personen, Alternativen sowie organisatorische und technische Anforderungen. Laufende Begleitressource, keine verpflichtende Schrittfolge. Originalquelle.
  4. NIST: Artificial Intelligence Risk Management Framework (AI RMF 1.0), 2023. Core-Einleitung sowie GOVERN, MAP, MEASURE und MANAGE. Freiwilliger Risikorahmen; keine vollständige Investitionsmethodik. Originalquelle.
  5. HM Treasury: Test and Learn, Begleitmaterial zum Magenta Book. Abschnitte zur Priorisierung kritischer Annahmen, proportionalen Methoden, Feedbackschleifen und dokumentierten Anpassungen. Öffentlicher Sektor; übertragen werden allgemeine Prüfprinzipien, kein Industriewirksamkeitsnachweis. Originalquelle.
  6. HM Treasury: Guidance on the Impact Evaluation of AI Interventions. Einführung, Baseline-Empfehlungen und Abschnitt 2.1 zu Evaluationsdesign und Stichproben. Öffentlicher Sektor; übernommen werden die Unterscheidung technischer und tatsächlicher Wirkung sowie allgemeine Vergleichsprinzipien. Originalquelle.
  7. HM Treasury: The Green Book (2026). Insbesondere die Abschnitte „Sunk costs“ sowie „Sensitivity analysis and switching values“. Öffentliche Investitionsbewertung; gesellschaftliche Bewertungsgrößen und öffentliche Diskontsätze werden hier nicht übernommen. Originalquelle.

Quellen zuletzt geprüft: 6. Oktober 2026.

Fachlich passende Artikel

Zuletzt fachlich aktualisiert: 3. November 2026. Nordwerk-Beschluss und Voraussetzungen der Vorprüfungen präzisiert.