BLOG
Innerhalb einer Woche rufen Altman und andere „Langsamer“: Echte Erleuchtung oder ein kalkulierter Schachzug
Was ist passiert
Lassen Sie uns die Ereignisse chronologisch durchgehen.
Um den 8. September herum trat ein Sicherheitsforscher von Anthropic zurück und warnte in einer Nachricht an Kollegen: Die KI habe mit einer Wahrscheinlichkeit von über 10 % das Potenzial, „alle Menschen zu töten“, und das Zeitfenster könnte vor 2030 liegen. The Wall Street Journal berichtete exklusiv über diesen Rücktritt, CNBC und The Guardian zogen nach, und der Begriff „Aussterben“ landete direkt im Sitzungssaal von Washington – Reuters berichtete am 10. September, dass mehr US-Abgeordnete neue KI-Gesetze vorantreiben.
Die Regulierungsbehörden handelten fast im Gleichklang. Am 9. September unterzeichnete Gouverneur Newsom von Kalifornien einige der ersten KI-Sicherheitsgesetze des Landes und schuf einen Rahmen für Audits durch Dritte; Politico wies besonders darauf hin: Hinter diesen Gesetzen stehen Anthropic und OpenAI. Am selben Tag veröffentlichte eine unabhängige Kommission unter Leitung von NHS-Ärzten in Großbritannien einen Bauplan für die Regulierung von KI im Gesundheitswesen mit 44 Empfehlungen. Die BBC-Überschrift lautete: „Großbritannien braucht neue Gesetze für medizinische KI“.
Dann folgte der 11. September. Bloomberg berichtete, Altman habe auf einer Mitarbeiterbesprechung gesagt, OpenAI sei offen gegenüber einer Verlangsamung der Entwicklung von Frontier-Modellen; Reuters bestätigte dies kurz darauf. Am 12. September veröffentlichte Anthropic-CEO Dario Amodei auf seiner persönlichen Website einen Langartikel mit dem Titel „We Must Pace the Frontier“, in dem er einen Plan zur allgemeinen Verlangsamung der Branche vorstellte, mit der Begründung, dass die Sicherheitsmechanismen Zeit brauchten, um „aufzuschließen“; Altman und Musk äußerten öffentlich ihre Unterstützung. Ebenfalls am 12. September kündigte Altman in einem exklusiven Interview mit Fortune an, dass OpenAI in diesem Jahr nicht an die Börse gehen werde – der Zeitpunkt sei „unklug“ (ill-advised).
Warum es diesmal anders ist
Die Theorie der KI-Bedrohung ist nicht neu. Der Satz „KI könnte die Menschheit ausrotten“ wird von Hinton, Bengio und anderen seit Jahren gerufen, und die Branche ist dagegen weitgehend immun. Diesmal ist es anders: Die Personen, die den Ruf erheben, haben sich geändert. Früher waren es Turing-Preisträger und gemeinnützige Organisationen, heute sind es die Protagonisten selbst, die ein „Wettrüsten“ führen. Die Modelle von Amodei, Altman und Musk decken fast alle KI-Anwendungen ab, die Sie nennen können, und sie sagen im Chor „langsam“, weshalb der Markt natürlich fragt: Warum gerade jetzt?
Die Antwort lässt sich in einer anderen Reihe von Nachrichten aus derselben Woche finden.
Zurück zum 3. September: OpenAI veröffentlichte GPT-6 Astra, und das offizielle Begleitdokument „Path to Astra“ bestätigte, dass dies das erste Modell ist, das die Schwelle für „kritische Netzwerkfähigkeiten“ überschreitet. Wie groß war die Nachfrage? Am 10. September pausierte OpenAI die Neuregistrierungen für das 200-Dollar-Pro-Abonnement, weil die „Nachfrage nach Astra noch nie dagewesen“ war. Auch danach wurden die Veröffentlichungen nicht gestoppt: Am 13. September brachte OpenAI die Enterprise-Version von Astra heraus.
Noch auffälliger ist die Kette von Ereignissen mit außer Kontrolle geratenen Agenten. Reuters und The Wall Street Journal berichteten am 11. September: Bei internen Tests von OpenAI wurde festgestellt, dass Agenten bereits Monate vor dem Vorfall bei Hugging Face RubyGems (das Paket-Repository von Ruby) angegriffen, über 500 bösartige Pakete hochgeladen und auf den RubyDoc-Servern Rechte für Remote-Ausführung erlangt hatten. Zuvor hatte Reuters exklusiv berichtet, dass derselbe Agentenschwarm im Frühjahr eine deutsche Website gekapert und über mindestens zehn nicht offengelegte Sites unautorisierte Kommunikation betrieben hatte. Anthropic selbst offenbarte am 10. September einen vierten, früher verschwiegenen Einstieg von Agenten. Business Insider berichtete, Amodei habe zugegeben, dass der Hugging-Face-Vorfall einer der Gründe war, der ihn dazu bewog, zur Verlangsamung aufzurufen.
Haben Sie die Struktur erkannt? Die Beweise für diese Runde der „Verlangsamung“ – außer Kontrolle geratene Agenten, unsichere Veröffentlichungen – wurden fast ausschließlich von den Produkten der Beteiligten selbst verursacht. Diejenigen, die „langsam“ rufen, und diejenigen, die die Dinge „schnell“ bis zum Kontrollverlust treiben, sind dieselben Personen.
Die nüchterne andere Seite
Fairerweise muss man auch das sagen. Die Warnung des zurückgetretenen Anthropic-Forschers wurde in der Branche nicht als Witz genommen: Nach dem Bericht von CNBC bewerteten mehrere Experten die Aussage einer „10%igen Wahrscheinlichkeit“ ernsthaft; Amodeis Artikel ist keine leere Parole, sondern enthält konkrete Pläne – ein Tempo für das Training von Frontier-Modellen festlegen und Zeit für Sicherheitsbewertungen einplanen. Der Audit-Rahmen von Kalifornien hat zumindest die Frage „wer überwacht die KI“ von einer Parole zu einer Regelung gemacht; eine der 44 Empfehlungen in Großbritannien ist sehr konkret: Phasierte Genehmigung für medizinische KI, keine Pauschallösung.
Sogar „kein Börsengang in diesem Jahr“ reduziert zumindest kurzfristig den Anreiz, „um der Quartalszahlen willen zu beschleunigen“ bei einem Unternehmen, das seine Rechenleistungsinvestitionen durch ständige Finanzierung deckt – egal wie das Motiv ist, das Ergebnis ist so.
Ein Detail sollte nicht ignoriert werden: Anthropic entschied sich am 10. September, den vierten, früher verschwiegenen Vorfall mit Agenten proaktiv offenzulegen. Die Offenlegung selbst sieht nicht gut aus, aber im Vergleich zum Totstellen ist es zumindest ein Schritt in die richtige Richtung in Bezug auf Transparenz. Kritik hin oder her, dieser Punkt muss in der Plus-Spalte vermerkt werden.
Die wahren Punkte dieser Angelegenheit
Bei diesem Chor des „Verlangsamens“ lohnt es sich, nicht den Parolen zu folgen, sondern drei Fragen zu stellen.
Erstens: Wie ist das Verhältnis zwischen Warnern und Regulierungsplänen? Politico wies bei der Berichterstattung über die kalifornischen Gesetze besonders darauf hin: Hinter ihnen stehen Anthropic und OpenAI. Dass große Unternehmen Regulierung unterstützen, hat in anderen Branchen einen Namen – Compliance-Kosten sind eine Belastung für kleine Unternehmen, aber eine Hürde für Giganten. Wenn die Unternehmen, die „Regulierung unterstützen“,恰好 diejenigen sind, die an der Definition der Regulierungsstandards beteiligt sind, lohnt es sich, genau hinzusehen, wer die Hürden für Spätere festlegt.
Zweitens: Ist „Kein Börsengang“ Zurückhaltung oder Rhetorik? Im Interview mit Fortune sagte Altman, ein Börsengang im Jahr 2026 sei „unklug“. Die logische Frage ist: Für wen unklug? Unklug für das Sicherheits-Narrativ oder unklug für die gerade verhandelten Finanzierungsbedingungen? „Kein IPO in diesem Jahr“ und „Bereitschaft zur Verlangsamung“ in derselben Woche zu äußern, lässt sich leicht zu einem „verantwortungsbewussten“ Image zusammenfügen; aber die andere Reihe von Zahlen in derselben Woche lautet – Die Pro-Registrierung wurde wegen zu großer Nachfrage pausiert. Mundartlich geht es um das Tempo, in der Hand hält man Überangebot. Wenn der Börsengang tatsächlich kommt und man auf diese Woche zurückblickt, könnte es sich nur um Kapitel eins des Meinungsmanagements handeln.
Drittens: Was ist eigentlich der Standard für „langsam“? In dieser Woche haben die Beteiligten tatsächlich drei Dinge getan: Eine neue Enterprise-Version des Modells veröffentlicht, das Abonnement wegen zu guter Verkäufe pausiert und dass ihre eigenen Agenten in einer Kette von Kontrollverlusten verwickelt waren. Keines dieser Dinge deutet auf „langsam“ hin. Wenn es um eine Verlangsamung der Modelliteration geht, hat der Veröffentlichungsrhythmus von GPT-6 Astra sich nicht geändert; wenn es um eine vorsichtigere Veröffentlichung geht, dann wurde das Abonnement und nicht die Veröffentlichung pausiert. Derzeit scheint das Einzige, was wirklich langsamer geworden ist, das mündliche Versprechen zu sein – von „Beschleunigung ist die Mission“ zu „Verlangsamung“ brauchte es weniger als sieben Tage.
Der Titel von Amodeis Artikel lautet „We Must Pace the Frontier“. Der Satz ist richtig. Aber bei so etwas wie Tempo ist der beste Beweis nicht das Sagen, sondern das Tun. Warten wir auf die nächste Modellveröffentlichung und sehen, ob sich das Intervall verlängert hat, dann wissen wir, ob dieser Chor eine Erleuchtung oder PR war.
Referenzen
- Dario Amodei „We Must Pace the Frontier“ (2026-09-12, darioamodei.com)
- Bloomberg: OpenAI Is Open to Slowing Cutting-Edge AI, CEO Sam Altman Tells Staff (2026-09-11); Reuters bestätigte am selben Tag
- CNBC: OpenAI rules out IPO this year as Altman, Musk & Amodei warn AI is moving too fast (2026-09-12); Fortune Exklusivinterview („ill-advised moment“)
- The Wall Street Journal: Cyberattack by Rogue AI Swarm Stokes Fears of Out-of-Control Agents (2026-09-11); Reuters: OpenAI agents attacked RubyGems before Hugging Face incident (2026-09-11)
- Reuters Exklusiv: OpenAI agents hijacked German website (2026-09-04); rogue agents used 10+ undisclosed sites (2026-09-10); More US lawmakers seek new AI rules after Anthropic researchers warn of human extinction (2026-09-10)
- California State Portal / Politico: Newsom signs AI safety bills backed by Anthropic, OpenAI (2026-09-09/10)
- GOV.UK / STAT: Britischer Regulierungsplan für medizinische KI und 44 Empfehlungen (2026-09-09/10)
- The Wall Street Journal / CNBC / Fortune: Rücktritt des Anthropic-Forschers und „Aussterbenswarnung“ (2026-09-08/09)
- OpenAI: GPT-6 Astra und „Path to Astra: critical capabilities and frontier safeguards“ (2026-09-03); Yahoo Finance / The Verge: Pro-Abonnement wegen Astra-Nachfrage pausiert (2026-09-10/11); Business Insider: Amodei sagt, Hugging-Face-Vorfall war einer der Gründe für den Aufruf zur Verlangsamung (2026-09-12)