KI-Hype-Zyklus: Woran Entscheider Fortschritt von Ankündigung unterscheiden

Fortschritt erkennen Entscheider daran, dass eine KI-Fähigkeit lieferbar ist, im eigenen Ablauf gemessen wurde und einen Nutzen zeigt, der sich in einer Kennzahl niederschlägt. Eine Ankündigung, eine Demonstration oder eine Vorabversion belegt das noch nicht. Der Beitrag ordnet das Phasenmodell des Hype-Zyklus ein, stellt fünf Reifestufen als Prüfwerkzeug vor und zeigt an belegten Studien, wie Wirkung aussieht, wenn sie vorliegt.

Seit der Veröffentlichung von ChatGPT Ende November 2022 erreichen die Geschäftsführung wöchentlich neue Meldungen: leistungsfähigere Sprachmodelle und Bildgeneratoren sowie Assistenten in Office-Programmen und Unternehmensversionen für den geschäftlichen Einsatz. Jede Meldung kommt mit dem Anspruch, dass sie die Branche verändert, und jede erzeugt in der Organisation die Frage, ob man handeln muss. Dieser Beitrag liefert einen Maßstab, mit dem sich solche Meldungen in wenigen Minuten einordnen lassen.

Was ist der KI-Hype-Zyklus?

Der Hype-Zyklus ist ein Phasenmodell, das den typischen Verlauf der Aufmerksamkeit für eine neue Technologie in fünf Abschnitten beschreibt: einen Auslöser, einen Gipfel überzogener Erwartungen, ein Tal der Enttäuschung, einen Anstieg realistischer Anwendung und ein Plateau der Produktivität. Das Modell ist ein Erfahrungsraster und keine Prognose. Es sagt nicht voraus, wann eine bestimmte Technik welche Phase erreicht, und es gilt je Anwendung, nicht je Technologie als Ganzes. Dieselbe Sprachtechnik kann bei der Textzusammenfassung auf dem Plateau stehen, während ihr Einsatz in Entscheidungen mit hohem Schadenspotenzial noch am Anfang liegt.

Verwandt ist eine Beobachtung, die dem Zukunftsforscher Roy Amara zugeschrieben wird: Die kurzfristige Wirkung einer Technologie wird überschätzt und die langfristige unterschätzt. Die Wirtschaftsgeschichte kennt das Muster. Der Wirtschaftshistoriker Paul David zeigte 1990 am Beispiel der Elektrifizierung, dass die Elektrizität in Fabriken jahrzehntelang kaum Produktivität brachte, solange Betreiber den Dampfantrieb eins zu eins ersetzten. Der Zuwachs kam, als sie Werkhallen und Abläufe neu entwarfen. Für Entscheider ist das die wichtigste Lehre des Zyklus: Die Technik ist der kleinere Teil der Arbeit, und der größere liegt im Ablauf, in dem sie genutzt wird.

Wie lässt sich eine KI-Meldung in fünf Reifestufen einordnen?

Eine KI-Meldung lässt sich über fünf Reifestufen einordnen, die danach fragen, was der Anbieter tatsächlich vorlegt. Je höher die Stufe, desto mehr Belege stehen hinter der Aussage.

Mit dieser Einordnung lässt sich jede Meldung der letzten Monate beurteilen. GPT-4 ist seit März 2023 über Bezahlzugang und Schnittstelle verfügbar und steht damit auf Stufe 4, ChatGPT Enterprise seit August 2023 ebenfalls. Neue Bildverstehen-Funktionen und Assistenten für Office-Anwendungen sind angekündigt oder werden ausgerollt und zählen je nach Zugang auf Stufe 2 oder 3. Wer die Stufe benennt, hat die wichtigste Frage der Geschäftsführung bereits beantwortet: Kann ich es morgen bestellen, und wer hat es unter meinen Bedingungen gemessen?

Wie sieht belegte Wirkung aus?

Belegte Wirkung zeigt sich in Studien mit Vergleichsgruppe, die einen Effekt in einer Kennzahl ausweisen und dessen Grenzen benennen. Drei Untersuchungen aus dem Jahr 2023 zeigen, was Stufe 5 bedeutet.

Eine Feldstudie mit über 5.000 Mitarbeitenden eines Kundenservice, die Brynjolfsson, Li und Raymond im April 2023 als Arbeitspapier veröffentlichten, maß, wie viele Anliegen je Stunde gelöst werden, wenn ein generativer Assistent Antworten vorschlägt. Im Durchschnitt stieg die Zahl um 14 Prozent, bei Neulingen um 34 Prozent, bei sehr erfahrenen Kräften kaum. Ein Experiment von Noy und Zhang mit Schreibaufgaben aus dem Berufsalltag, im Sommer 2023 in der Zeitschrift Science erschienen, verkürzte die Bearbeitungszeit um rund 40 Prozent, und unabhängige Bewerter beurteilten die Qualität um etwa 18 Prozent höher. Eine im September 2023 vorgelegte Studie von Dell'Acqua und Kollegen mit 758 Unternehmensberatern zeigte, dass Teilnehmende mit GPT-4 bei Aufgaben innerhalb der Leistungsgrenze der Technik 12,2 Prozent mehr Aufgaben erledigten und 25,1 Prozent schneller waren. Bei einer Aufgabe außerhalb dieser Grenze lagen sie um 19 Prozentpunkte seltener richtig als die Kontrollgruppe.

Zwei Lehren stecken in diesen Ergebnissen. Erstens sind die Effekte real und stark, wenn Aufgabe, Werkzeug und Ablauf zusammenpassen. Zweitens verläuft die Grenze der Leistungsfähigkeit ungleichmäßig, sodass eine Anwendung auf derselben Plattform in einem Fall hilft und im nächsten schadet. Die Studien sind jeweils auf einen Aufgabentyp begrenzt, ein Ergebnis aus dem Kundenservice begründet also keine Annahme über die Rechnungsprüfung. Entscheider gewinnen daraus eine Anforderung an jede Anbieteraussage: Sie nennt die Aufgabe und die Messgröße sowie die Vergleichsgruppe und die Grenzen.

Welche Prüffragen trennen Fortschritt von Ankündigung?

Sechs Prüffragen trennen in der Praxis Fortschritt von Ankündigung, und jede lässt sich ohne technische Vorbildung stellen. Sie eignen sich für Vorstandssitzungen, Anbietergespräche und Anfragen aus Fachbereichen.

1. Welche Reifestufe hat die Meldung, und wo steht der Beleg für diese Stufe?
2. Welche Aufgabe wird verbessert, und welche Kennzahl misst die Verbesserung?
3. Gab es eine Vergleichsgruppe ohne die Technik, und wer hat gemessen?
4. Mit welchen Daten lief die Demonstration, und entsprechen sie den Daten im eigenen Betrieb?
5. Wer verantwortet die Anwendung ab dem ersten Tag, und wer pflegt sie?
6. Was kostet der Betrieb je Nutzer oder je Vorgang, und wann liegt der Break-even?

Eine Meldung, die alle sechs Fragen beantwortet, hat Stufe 5 erreicht und gehört in die Planung. Beantwortet sie nur die erste, bleibt sie in der Beobachtung. Diese Trennung verhindert den häufigsten Fehler in der Phase des überzogenen Interesses, nämlich Budget für Stufe 1 und 2 zu vergeben, weil Wettbewerber über dieselbe Meldung sprechen. Wie Druck dieser Art entsteht, beschreibt der Beitrag KI-FOMO: Warum Unternehmen aus Angst vor dem Verpassen falsch investieren. Den Blick auf die ersten zwölf Monate nach ChatGPT enthält ChatGPT im Unternehmen: Ein Jahr nach dem Hype nüchtern betrachtet.

Wie legen Entscheider ein Beobachtungsraster an?

Ein Beobachtungsraster ordnet alle laufenden KI-Themen des Unternehmens einer Reifestufe zu und legt je Stufe fest, welcher Einsatz an Zeit und Geld vertretbar ist. Eine Seite genügt: links die Anwendung, in der Mitte die Stufe, rechts der nächste Beleg, der die Stufe verändern würde, und der Termin der nächsten Prüfung. Quartalsweise aktualisiert, wird daraus eine ruhige Entscheidungsgrundlage. Anwendungen auf Stufe 4 und 5 bekommen Pilotbudget, solche auf Stufe 3 einen kleinen Test, und Stufe 1 und 2 bleiben Gegenstand der Marktbeobachtung durch eine benannte Person.

Das Raster beantwortet auch die Frage, wer im Unternehmen Meldungen bewertet. Ohne Zuständigkeit kommen Meldungen über Zufallswege in die Geschäftsführung, und die lauteste Stimme bestimmt die Agenda. Mit einer benannten Rolle, die Meldungen einstuft, entsteht ein geordneter Strom, der Entscheidungen vorbereitet.

Was bedeutet das für Niehues Consulting und Ihre Planung?

Niehues Consulting ist eine Beratung für KI-Management und Organisationsdesign aus der Lieferperspektive mit Sitz in Düsseldorf. Gründer Marin Niehues bringt KI in den Betrieb, in Projekten von VC-finanzierten Scaleups bis zu DAX-40-Konzernen und in über 20 Ländern auf sechs Kontinenten. Im Leistungsfeld KI-Management gehören Business Analysis, Business Case sowie Auswahl und Reihenfolge der Anwendungen zur Arbeit, also genau die Schritte, die eine Meldung von Stufe 3 auf Stufe 5 bringen.

Das Vorgehen folgt dem Niehues Delivery Model. Für die Einordnung von Meldungen zählen drei Prüffragen: Welches Geschäftsergebnis soll sich messbar verändern? Was ist der Ausgangswert, und woran messen wir den Erfolg? Beweist der Prototyp den Nutzen im echten Ablauf mit echten Daten? Umfang und Konditionen eines Vorhabens werden in der kostenfreien Erstberatung besprochen, die Sie über den Kontakt vereinbaren.