Ihre Informationsquelle erster Wahl für künstliche Intelligenz.

Wissenschaftliche Publikation

Mit GPT-5 unterstützt, dann auf sich allein gestellt: Eine randomisierte Studie misst die Kosten des Lernens durch KI-Hilfe

Drei randomisierte Studien (1.222 Teilnehmende) von Forschenden aus Carnegie Mellon, Oxford, dem MIT und UCLA zeigen: Das Training mit GPT-5 verschlechtert die Leistung, sobald der Assistent entfernt wird – 57 % Erfolg gegenüber 73 % – und lässt die Abbrüche nahezu verdoppeln.

STStephane Nachez · ·3 min
Mit GPT-5 unterstützt, dann auf sich allein gestellt: Eine randomisierte Studie misst die Kosten des Lernens durch KI-Hilfe
Visuel d'illustration généré par l'IA
Inhalt

Was bleibt von den Fähigkeiten, wenn der Assistent verschwindet? Eine Reihe randomisierter kontrollierter Studien, die im April auf arXiv veröffentlicht wurde, liefert eine der ersten kausalen Antworten: Das Training mit einem KI-Assistenten verringert die Ausdauer und verschlechtert die eigenständige Leistung – selbst bei einer so elementaren Aufgabe wie dem Bruchrechnen. Die Studie stammt von Grace Liu (Carnegie Mellon), gemeinsam mit Brian Christian und Tsvetomira Dumbalska (Oxford), Michiel A. Bakker (MIT) und Rachit Dubey (UCLA) – Christian ist Autor von The Alignment Problem.

Das Protokoll

Die Forschenden rekrutierten insgesamt 1.222 Teilnehmende, die zufällig auf drei Experimente verteilt wurden. Im Hauptversuch trainierten die Teilnehmenden an 12 Bruchaufgaben – mit oder ohne einen auf GPT-5 basierenden Assistenten – und absolvierten anschließend alle denselben Abschlusstest mit 3 Aufgaben, ohne Hilfe, wobei jederzeit ein „überspringen“-Button zum Abbrechen einer Aufgabe verfügbar war. Eine Replikation (667 Teilnehmende) verschärfte das Design mit einem Vortest, und ein drittes Experiment übertrug das Protokoll auf das Textverständnis.

Die Ergebnisse

Der Unterschied ist deutlich. Im abschließenden Test ohne KI im Hauptversuch löste die zuvor unterstützte Gruppe 57 % der Aufgaben korrekt, gegenüber 73 % in der Gruppe, die allein trainiert hatte; die Abbruchrate verdoppelte sich nahezu von 11 % auf 20 %. Die Replikation bestätigte den Effekt, wenn auch abgeschwächt (71 % gegenüber 77 %), und das Textverständnis bestätigte ihn ebenfalls (76 % gegenüber 89 %, mit achtmal so vielen Abbrüchen). All das nach nur etwa zehn Minuten Exposition: Die Unterstützung verlagerte die Kompetenz nicht nur auf das Werkzeug, sondern schwächte auch die Bereitschaft zur Anstrengung selbst. Die Autoren sehen darin eine Konditionierung: Die KI gewöhnt an die sofortige Antwort und nimmt die Erfahrung, eine Schwierigkeit zu überwinden.

Was die Studie beweist – und was nicht

Die Stärke des Ergebnisses liegt im Design: Die zufällige Zuweisung erlaubt eine kausale Lesart, während die meisten Arbeiten über eine mit KI verbundene „kognitive Atrophie“ auf Korrelationen oder Selbstauskünften beruhen. Ihre Grenzen sind ebenso klar. Es handelt sich um einen Preprint, der noch nicht peer-reviewed ist. Die Aufgaben bleiben eng gefasst – Brüche und das Lesen kurzer Texte –, der Zeithorizont ist unmittelbar, nur ein einziges Modell wurde getestet, und der Effekt schwächt sich in der Replikation mit dem strengeren Protokoll deutlich ab. Die Studie identifiziert einen Mechanismus, aber kein allgemeines Gesetz.

Warum das Ergebnis wichtig ist

Der Mechanismus ist dennoch weit über das Labor hinaus relevant. In der Bildung beschreibt er das Szenario, das Lehrkräfte befürchten: ein Werkzeug, das die unmittelbare Leistung verbessert, während es zugleich die Fähigkeit erodiert, ohne es zu arbeiten. In Unternehmen, wo Assistenten als implizite Trainingswerkzeuge eingesetzt werden, legt er nahe, dass assistierte Leistung ein trügerischer Indikator für die tatsächliche Kompetenz von Teams ist. Und für die Entwickler von Assistenten spricht er für bislang seltene Designentscheidungen: bewusste Reibung, Trainingsmodi, in denen die KI anleitet, ohne die Aufgabe zu lösen. Die Frage ist nicht mehr, ob Unterstützung hilft – das tut sie –, sondern was sie zurücklässt, wenn man sie entfernt.

ST
Stephane Nachez
subscriber

ActuIA-Redaktion — Nachrichten, Daten und Analysen zur künstlichen Intelligenz für Entscheidungsträger.