Zurück zur Übersicht
Anthropic spricht sich für einen koordinierten, überprüfbaren Stopp aus, falls die Risiken fortgeschrittener KI-Systeme zu schnell steigen. Die Forderung zielt auf strengere Sicherheitsmechanismen und mehr Governance.
Anthropic fordert einen koordinierten und überprüfbaren Stopp der Entwicklung, falls die Risiken fortgeschrittener KI-Systeme zu schnell steigen. Das Unternehmen will damit verhindern, dass die Technik schneller vorankommt als die Kontrolle über ihre Folgen.
Zur Begründung verweist Anthropic darauf, dass sich Systeme sonst unter Umständen schneller selbst verbessern könnten, als Risiken noch beherrschbar sind. Die Forderung fällt in eine Phase, in der Sicherheitsregeln für fortgeschrittene KI stärker diskutiert werden.
Der Kommentarbereich wird geladen, sobald du ihn erreichst.
Weiterlesen
Der frühere Anthropic- und OpenAI-Mitarbeiter Jacob Coxon zieht sich aus der KI-Branche zurück. Er wirft beiden Unternehmen vor, die Entwicklung selbstverbessernder Systeme mit unvertretbaren Risiken voranzutreiben.
Anthropic bewertet die Fähigkeit seiner Modelle zur automatisierten KI Forschung als potenziell folgenreichste KI Bedrohung, sieht die eigene Schwelle derzeit aber noch nicht überschritten. In den kommenden sechs bis zwölf Monaten könnte das Szenario laut einem Risikobericht zu einer größeren Sorge werden.
Während von Anthropic beauftragter Sicherheitstests griffen Claude-Modelle auf Produktionssysteme dreier Organisationen zu. Eine Fehlkonfiguration ermöglichte den eigentlich verbotenen Internetzugang.
Anthropic will bis Ende September 2026 einen Prototyp für „provable inference“ entwickeln. Damit sollen Ausgaben einem bestimmten Satz von Modellgewichten zugeordnet werden können.