OpenAI setzt neue Sicherheitsmaßnahmen gegen Biorisiken ein

SAN FRANCISCO / MÜNCHEN (IT BOLTWISE) – OpenAI hat kürzlich ein neues System eingeführt, um seine neuesten KI-Modelle, o3 und o4-mini, auf Anfragen zu überwachen, die sich auf biologische und chemische Bedrohungen beziehen.

OpenAI hat ein neues Überwachungssystem entwickelt, um die Sicherheit seiner neuesten KI-Modelle o3 und o4-mini zu gewährleisten. Diese Modelle sind in der Lage, komplexe Fragen zu beantworten, was sie in den Händen von böswilligen Akteuren potenziell gefährlich macht. Um das Risiko zu minimieren, dass die Modelle Anleitungen zur Durchführung schädlicher Angriffe geben, hat OpenAI ein sogenanntes ‘sicherheitsfokussiertes Überwachungsmodul’ implementiert.

Die neuen Modelle o3 und o4-mini stellen laut OpenAI eine bedeutende Weiterentwicklung im Vergleich zu früheren Modellen dar. Insbesondere o3 zeigt eine erhöhte Fähigkeit, Fragen zur Erstellung bestimmter biologischer Bedrohungen zu beantworten. Um diesen Risiken entgegenzuwirken, wurde das Überwachungssystem speziell darauf trainiert, Anfragen zu biologischen und chemischen Risiken zu identifizieren und die Modelle anzuweisen, keine Ratschläge zu diesen Themen zu geben.

Um eine Grundlage für die Überwachung zu schaffen, haben sogenannte Red-Teamer etwa 1.000 Stunden damit verbracht, unsichere Gespräche im Zusammenhang mit Biorisiken zu kennzeichnen. In Tests, bei denen die Blockierungslogik des Sicherheitsmonitors simuliert wurde, lehnten die Modelle in 98,7 % der Fälle die Beantwortung riskanter Anfragen ab.

OpenAI gibt zu, dass der Test nicht berücksichtigt, dass Personen nach einer Blockierung neue Anfragen stellen könnten. Daher wird das Unternehmen weiterhin teilweise auf menschliche Überwachung setzen. Obwohl o3 und o4-mini nicht die ‘hohe Risikoschwelle’ von OpenAI für Biorisiken überschreiten, waren sie im Vergleich zu früheren Modellen wie o1 und GPT-4 hilfreicher bei der Beantwortung von Fragen zur Entwicklung biologischer Waffen.

OpenAI verfolgt aktiv, wie seine Modelle es böswilligen Nutzern erleichtern könnten, chemische und biologische Bedrohungen zu entwickeln. Dies ist Teil des kürzlich aktualisierten Vorbereitungsrahmens des Unternehmens. OpenAI setzt zunehmend auf automatisierte Systeme, um die Risiken seiner Modelle zu mindern. Zum Beispiel wird ein ähnliches Überwachungsmodul verwendet, um zu verhindern, dass der native Bildgenerator von GPT-4o Material zur sexuellen Ausbeutung von Kindern erstellt.

Dennoch haben mehrere Forscher Bedenken geäußert, dass OpenAI die Sicherheit nicht so stark priorisiert, wie es sollte. Ein Partner des Unternehmens für Red-Teaming, Metr, gab an, dass er relativ wenig Zeit hatte, o3 auf einem Benchmark für täuschendes Verhalten zu testen. In der Zwischenzeit hat OpenAI beschlossen, keinen Sicherheitsbericht für sein Modell GPT-4.1 zu veröffentlichen, das Anfang dieser Woche auf den Markt kam.

Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!