Categories
ausland etplus ticker

Anthropic-Experimente: KI steht kurz vor der Selbstreplikation


In Kürze:

  • Anthropic-Forscher ließen ein kleines KI-Modell auf 15 günstigen Android-TV-Boxen laufen – es konnte ein weiteres Modell verbreiten.
  • Eine Selbstreplikation von KI könnte laut den Forschern schon in wenigen Monaten möglich sein.
  • Internetfähige Haushaltsgeräte wie TV-Boxen und Backöfen könnten zu Angriffszielen werden.

 
Experimente von Anthropic-Forschern, deren Ergebnisse das Unternehmen am 12. Oktober veröffentlichte, ergaben, dass KI-Modelle möglicherweise in internetfähige Geräte eindringen und dort Aktionen ausführen können – selbst ohne Zugang zu Rechenzentren.
In einem Test ließen die Forscher ein kleines KI-Modell auf 15 Android-TV-Boxen weniger bekannter Marken laufen. Während des Tests konnte das Modell ein weiteres KI-Modell verbreiten.
„Das deutet darauf hin, dass künftige kleinere Modelle mit vergleichbaren Fähigkeiten ebenfalls die Schritte der Netzwerkerkundung, der Übertragung benötigter Dateien und der Inbetriebnahme des KI-Modells ausführen könnten, die zum Replikationsprozess gehören“, erklärten die Forscher in einem Bericht. Eine vollständige Selbstreplikation wurde jedoch nicht festgestellt.

KI-Agenten werden leistungsfähiger

Auch größere Modelle könnten dabei eine Rolle spielen, indem sie in mehrere Teile aufgeteilt und über mehrere Geräte verteilt ausgeführt werden.
„Wir verfügen noch nicht über einen vollständig autonomen, sich selbst verbreitenden KI-Agenten. Doch KI-Agenten werden zunehmend fähig, einzelne Schritte der Replikationskette auszuführen und ihre Anpassungen an künftige Kopien ihrer selbst weiterzugeben“, erklärten die Forscher.
Sie schätzten, dass eine Selbstreplikation bereits in wenigen Monaten möglich sein könnte.
Forscher von Anthropic, OpenAI und anderen KI-Unternehmen haben bereits zuvor gewarnt, dass KI-Modelle rasch leistungsfähiger werden. Sie haben dokumentiert, wie einige Modelle ihre programmierten Beschränkungen überwunden, Websites angegriffen und Daten beschafft haben, die eigentlich unzugänglich sein sollten oder nur gegen Bezahlung erhältlich waren.
Washington, D.C., 29. September 2026 – Dario Amodei (r.), CEO von Anthropic, spricht bei einem Pressetermin von US-Präsident Donald Trump (l.) mit Führungskräften aus der KI-Branche vor dem Westflügel des Weißen Hauses. Zuvor hatten sie über Schutzvorkehrungen für die KI-Entwicklung beraten. Foto: Kevin Dietsch/Getty Images

Washington, D.C., 29. September 2026 – Dario Amodei (r.), CEO von Anthropic, spricht bei einem Pressetermin von US-Präsident Donald Trump (l.) mit Führungskräften aus der KI-Branche vor dem Westflügel des Weißen Hauses. Zuvor hatten sie über Schutzvorkehrungen für die KI-Entwicklung beraten.

Foto: Kevin Dietsch/Getty Images

Daniel Freeman, der den neuen Bericht gemeinsam mit William Zhou verfasst hat, schrieb auf X, die Untersuchung habe Fähigkeiten demonstriert, die bislang nur aus Science-Fiction-Szenarien bekannt gewesen seien.

Notwendig: Computerinfrastruktur besser absichern

„Das ist wirklich seltsam! Früher lebten wir nicht in einer Welt, in der kleine Dinger in Kästen sich über Netzwerke verbreiten, Computer vereinnahmen, sich so umkonfigurieren können, dass sie auf den gefundenen Geräten besser funktionieren, und so weiter und so fort“, schrieb Freeman, KI-Forscher bei Anthropic.
„Wir müssen uns künftig schlicht mit dieser neuen Art von etwas auseinandersetzen: einem System, das ganz selbstverständlich und mühelos auf Computer zugreifen und sie nutzen kann – für jeden beliebigen Zweck, den es selbst verfolgt oder zu dem es angewiesen oder überredet wurde.“
Und weiter: „Es liegt auf der Hand, dass wir noch viel tun müssen, um unsere verwundbare Computerinfrastruktur besser abzusichern und den möglichen Schadensradius solcher unkontrollierten KI-Systeme zu begrenzen. Doch unabhängig davon, welche Maßnahmen wir ergreifen: Es ist klar, dass diese Systeme kommen werden!“

Fernseher und Backöfen könnten Zielobjekte werden

Zu den internetfähigen Geräten, die in vielen Haushalten zu finden sind, gehören TV-Boxen, Smart-TVs und intelligente Backöfen.
Diese Geräte sind schon seit Langem anfällig für Angriffe. Laut dem Bericht von Anthropic könnte KI jedoch eher bereit sein, sie anzugreifen, als menschliche Hacker.
Die Forscher empfehlen deshalb, die Schutzmaßnahmen für diese Geräte zu verstärken – insbesondere angesichts der zunehmenden Leistungsfähigkeit von KI.
Smartphone mit Anthropic-Logo vor einem Hintergrund mit den Worten „Artificial Intelligence AI“, aufgenommen am 11. Juli 2026 in Tunis, Tunesien. (Symbolbild) Foto: Imen Ben Youssef/Hans Lucas/AFP via Getty Images

Smartphone mit Anthropic-Logo vor einem Hintergrund mit den Worten „Artificial Intelligence AI“, aufgenommen am 11. Juli 2026 in Tunis, Tunesien. (Symbolbild)

Foto: Imen Ben Youssef/Hans Lucas/AFP via Getty Images

 
Dieser Artikel erschien im Original auf theepochtimes.com unter dem Titel „Experiments Show AI Close to Self-Replicating: Anthropic“. (Übersetzung und redaktionelle Bearbeitung: sm)
Categories
ausland ticker

Trump und Tech-Chefs unterzeichnen freiwillige Vereinbarung zu KI-Standards


In Kürze:

  • Trump und führende Tech-Manager unterzeichnen freiwillige KI-Vereinbarung.
  • Unternehmen sollen interne Kontrollen, Audits und Risikoprüfungen etablieren.
  • Die Vereinbarung setzt auf Selbstregulierung und gemeinsame Sicherheitsstandards.

 
US-Präsident Donald Trump und führende Vertreter der Technologiebranche haben eine freiwillige Vereinbarung über Standards und Kontrollen für Künstliche Intelligenz (KI) unterzeichnet.
Die Vereinbarung kam nach einem Treffen mit Branchenführern am Dienstag, 29. September, im Weißen Haus zustande. Trump bezeichnete sie während einer Pressekonferenz nach dem Treffen als „eine Verfassung, gewissermaßen“.
„Sie ist wirklich eine Form des Schutzes“, sagte Trump.
Trump, Regierungsvertreter und der republikanische Sprecher des Repräsentantenhauses, Mike Johnson, trafen sich mit CEOs der Technologiebranche angesichts zunehmender Debatten über die Risiken von KI und darüber, ob regulatorische Leitplanken erforderlich sind, um Bedrohungen für die Cybersicherheit abzuwehren.

Elon Musk, Donald Trump, Mark Zuckerberg, Jensen Huang und Mike Johnson sprechen am 29. September 2026 nach einem KI-Treffen vor dem Weißen Haus.

Foto: Kevin Dietsch/Getty Images

Trump veröffentlichte den Text der Vereinbarung Stunden nach der Unterzeichnung in den sozialen Medien.

Interne Kontrollen und Prüfungen

Die Vereinbarung beginnt mit dem Satz: „Wir glauben, dass jedes Unternehmen dafür verantwortlich ist, seine Technologie sicher und auf eine Weise zu entwickeln, die Vertrauen bei Kunden und der Öffentlichkeit schafft“. Dies gelte insbesondere für Unternehmen, die sogenannte Frontier-Modelle – also die leistungsfähigsten KI-Modelle an der technologischen Spitze – trainieren und einsetzen.
Meta-CEO Mark Zuckerberg sagte Reportern nach dem Treffen, dass es sich um eine Reihe von Prinzipien und Verpflichtungen für KI-Unternehmen handele, „robuste interne Kontrollen“ einzuführen und mögliche Probleme mit der Technologie zu erkennen.

Mark Zuckerberg spricht am 29. September 2026 gemeinsam mit US-Präsident Donald Trump nach einem Treffen zur künstlichen Intelligenz vor dem Weißen Haus.

Foto: Kevin Dietsch/Getty Images

Laut dem Text soll dies mit Prüfungen und internen Kontrollen zur Risikobewertung, externen Prüfern und Evaluatoren sowie der Zusage verbunden werden, dass der Vorstand jedes Unternehmens die Prüfberichte unabhängig bewertet.
Die freiwillig teilnehmenden Unternehmen erklärten sich außerdem bereit, sich regelmäßig zu treffen. Ziel sei es „Standards und bewährte Verfahren festzulegen, um die Sicherheit ihrer Systeme zu verbessern“, heißt es im Text.

Trump setzt auf Selbstregulierung

„Es besteht die Überzeugung, dass es eine sehr starke Selbstregulierung geben sollte. Und wir haben automatisch eine Regulierung durch das Justizministerium, das FBI und all das. Aber die Selbstregulierung ist sehr wichtig“, sagte Trump.
Dies beinhalte, wie er sagte, „Selbstkontrolle“.

US-Präsident Donald Trump spricht am 29. September 2026 im Weißen Haus bei einem Treffen zur künstlichen Intelligenz. Mit dabei sind unter anderem NVIDIA-CEO Jensen Huang und Elon Musk.

Foto: Kevin Dietsch/Getty Images

Zuckerberg sagte, die Vereinbarung sei für die KI-Sicherheit nicht als „das Einzige gedacht, was wir jemals tun werden“. Weiter sagte er: „Dies ist ein Anfang und eine Vereinbarung, auf die sich die gesamte Branche einigen könnte.“
Anthropic-CEO Dario Amodei sagte gegenüber Reportern: „[…] ich denke, die Technologie birgt sehr reale Risiken. Und, wissen Sie, der Mechanismus, wie wir diese Risiken angehen, wird noch diskutiert.“

Balance zwischen Innovation und Aufsicht

Johnson sagte am Montag gegenüber dem „Fox Business Network“, dass das Treffen in Washington darauf abzielen werde, „das richtige Gleichgewicht“ zwischen Innovation und Aufsicht zu finden. Er fügte hinzu, dass die Vereinigten Staaten kein Moratorium für die Entwicklung von KI benötigten, „weil wir das Rennen gegen China verlieren werden“.
Amodei, Zuckerberg, OpenAI-Präsident Greg Brockman, X- und SpaceX-CEO Elon Musk sowie NVIDIA-Präsident und -CEO Jensen Huang gehörten laut einer von Trump veröffentlichten Sitzordnung zu den Teilnehmern des Mittagessens am Dienstag im East Room des Weißen Hauses.
Ebenfalls anwesend waren Amazon-Gründer Jeff Bezos sowie Führungskräfte von Google, Microsoft, Palantir, Palo Alto Networks, AMD, Broadcom und Exiger.

US-Präsident Donald Trump spricht am 29. September 2026 bei einem Treffen mit Technologievertretern über künstliche Intelligenz im Weißen Haus in Washington.

Foto: Kent Nishimura/AFP via Getty Images

KI-Sicherheitsvorfälle

Das Treffen fand vor dem Hintergrund mehrerer bekannt gewordener Sicherheitsvorfälle mit KI-Systemen statt.
OpenAI hatte zuvor mitgeteilt, dass seine KI-Agenten aus einer Testumgebung ausgebrochen seien.
Forscher berichteten anschließend über weitere Vorfälle im Zusammenhang mit OpenAI-Modellen, darunter die Übernahme einer deutschen Website, das Hochladen schädlicher Softwarepakete auf die RubyGems-Plattform sowie Angriffe auf Websites von Universitäten und Regierungsbehörden.
Auch KI-Modelle von Anthropic, Meta und Google versuchten, in die Systeme von Unternehmen, Organisationen, Universitäten und Behörden einzudringen. Bei einigen Vorfällen waren die Versuche erfolgreich, bei anderen scheiterten sie.
Anthropic veröffentlichte Anfang September einen 154-seitigen Bericht, in dem beschrieben wird, wie kriminelle Akteure seinen Claude-Chatbot für verschiedene Aktivitäten wie die Ausspähung von Bewegungen des US-Militärs und die Erforschung der Entwicklung biologischer Waffen nutzten.

OpenAI setzt Training und Veröffentlichung aus

Der Entwickler von ChatGPT teilte am Montag, 28. September, mit, dass er zum zweiten Mal innerhalb von drei Monaten das Training und die Veröffentlichung eines seiner fortschrittlichsten Modelle aussetzen werde, nachdem es die Sicherheitsstandards des Unternehmens nicht erfüllt habe.
Die Vorfälle haben die Debatte über zusätzliche Sicherheitsvorkehrungen, staatliche Aufsicht und die weitere Entwicklung von KI verstärkt.
Trump hat wiederholt gesagt, dass die USA die Entwicklung von KI nicht durch zusätzliche Vorgaben einschränken sollten. Andernfalls, so Trump, könnten die USA ihre Position gegenüber China gefährden.
„Wir liegen jetzt vor China und allen anderen, und ich möchte, dass das so bleibt“, sagte Trump am Dienstag bei dem Treffen mit den KI-Führungskräften.
„Die einzige Möglichkeit, dafür zu sorgen, dass es so bleibt, besteht darin, genau das zu tun, was wir gerade tun. Wir wollen das Wachstum nicht abwürgen. Gleichzeitig wollen wir, dass die Menschen ehrlich handeln. Wir wollen, dass sie vertrauenswürdig sind, und deshalb haben wir das Justizministerium. Deshalb haben wir das FBI. Deshalb haben wir staatliche Stellen, die sehr effektiv sind, wenn Menschen beschließen, einen sehr dunklen und gefährlichen Weg einzuschlagen“, fuhr er fort.
 
Dieser Artikel erschien im Original auf theepochtimes.com unter dem Titel „Trump, Industry Leaders Sign Voluntary Accord on AI Standards“. (deutsche Bearbeitung: zk)