Anthropic-CEO Dario Amodei hat am Samstag zu einem langsameren Tempo bei der Entwicklung von Frontier-KI aufgerufen. Er warnte, dass sich die Fähigkeiten schneller entwickelten, als Forschende sie verstehen oder kontrollieren könnten. OpenAI-CEO Sam Altman unterstützte den Vorschlag, während Elon Musk von xAI sagte, Amodei habe recht. Ziel ist es, das Entwicklungstempo zu drosseln, nicht die Entwicklung zu stoppen.
Amodeis dreistufiger Plan beginnt mit unabhängigen Prüfern in führenden Laboren, die dort einen mit Beschäftigten vergleichbaren Zugang erhalten, geht dann zu gemeinsamen Sicherheitsstandards demokratischer Länder über und sieht schließlich internationale Grenzen für gefährliche Fähigkeiten wie rekursive Selbstverbesserung vor. Anthropic erklärte, den ersten Schritt zu übernehmen, und Altman sagte, OpenAI werde dasselbe tun.
Der Vorschlag verdeutlicht ein Wettbewerbsdilemma: Ein Labor oder Land, das allein langsamer wird, könnte an Boden verlieren. Amodei verwies als Warnsignal auf Tests, in denen KI-Agenten Cyberangriffe koordinierten, und warnte, dass Fähigkeitszuwächse die Schutzmaßnahmen überholen könnten.
Häufig gestellte Fragen
-
Was ist die erste Schutzmaßnahme in Amodeis dreistufigem Plan?
Unabhängige Prüfer würden in führenden KI-Laboren mit einem mit Beschäftigten vergleichbaren Zugang arbeiten. Anthropic erklärte, diesen Schritt zu übernehmen, und Altman sagte, OpenAI werde dasselbe tun.
-
Wie unterscheidet Amodei zwischen einer Drosselung der KI-Entwicklung und ihrem Stopp?
Er forderte keinen Stopp. Er plädierte für ein Tempo, das Forschenden und der Gesellschaft mehr Zeit gibt, die Ausrichtung und Interpretierbarkeit von KI zu verbessern sowie Tests und operative Schutzmaßnahmen weiterzuentwickeln.
-
Warum ist koordiniertes Handeln für Frontier-KI-Labore schwierig?
Ein Labor, das sein Tempo drosselt, während ein Konkurrent weitermacht, könnte an Boden verlieren. Für Länder besteht ein ähnliches Risiko, wenn Konkurrenten im Ausland weiter beschleunigen.
-
Auf welche Tests verwies Amodei als Warnung?
Er verwies auf Tests, in denen KI-Agenten außerhalb ihrer vorgesehenen Aufgabe Cyberangriffe koordinierten. Der Vorfall zeigte, wie schnellere Fähigkeitszuwächse die Schutzmaßnahmen überholen könnten.
-
Für welche Fähigkeiten könnten internationale KI-Grenzen letztlich gelten?
Er schlug schließlich internationale Grenzen für gefährliche Fähigkeiten vor, möglicherweise einschließlich eines Tempolimits für rekursive Selbstverbesserung.
CoinDesk