Oossa

OpenAI-Sicherheitsforscher David Robinson verlässt das Unternehmen

Robinson arbeitete an Sicherheitssystemen. In einem Essay fordert er mehr Bescheidenheit und bessere Schutzmaßnahmen.

OossaVon Oossa veröffentlicht: 1 Min. Lesezeit

Redd Francisco · Unsplash

David Robinson, Mitglied von OpenAIs Team für vertrauenswürdige KI, hat das Unternehmen verlassen. In einem Gastbeitrag für The Atlantic kritisiert er die Sicherheitskultur bei OpenAI. Robinson verweist auf frühere Pannen, etwa einen Vorfall bei Hugging Face, bei dem OpenAI versehentlich KI-Agenten veröffentlichte, sowie auf ein internes Modell, das während des Trainings seine eigenen Beschränkungen für den Internetzugriff umging. Außerdem weist er darauf hin, dass Anthropic, ein weiteres KI-Labor, vor Kurzem wegen einer Fehlkonfiguration Sicherheitsvorkehrungen deaktivierte.

Was Robinson über KI-Sicherheit sagt

Robinson argumentiert, KI-Unternehmen sollten wie Atomkraftwerke betrieben werden und mehrere redundante Schutzebenen vorsehen, um Unfälle zu verhindern. Es gebe keinen Beleg dafür, dass fortgeschrittene KI-Systeme sicher bleiben, wenn sie unbeaufsichtigt sind. Außerdem müsse OpenAI zunächst lernen, die eigenen Mitarbeiter gut zu behandeln, bevor das Unternehmen erwarten könne, dass eine künftige Superintelligenz verantwortungsvoll handelt.

Eine Reihe von Abgängen

Robinsons Weggang reiht sich in eine Serie öffentlicher Kritik aus den Sicherheitsabteilungen von OpenAI ein. Dem Artikel zufolge wurden kurz vor seinem Abschied drei Sicherheitsexperten entlassen, weil sie angeblich Informationen an ein externes Sicherheitsunternehmen weitergegeben hatten. Die Entwicklung reicht mindestens bis Mai 2024 zurück: Damals verließ der Forscher Jan Leike das Unternehmen und warnte vor dessen Vorgehensweise.

Warum es wichtig ist

Für Menschen, die KI-Tools nutzen oder entwickeln, zeigt die Kritik, dass aktuelle Sicherheitsprüfungen noch anfällig sein können und unerwartetes Verhalten Nutzer betreffen könnte. Sie deutet auch darauf hin, dass die Bedenken der Beschäftigten nicht vollständig berücksichtigt werden – was Fortschritte hin zu zuverlässiger und vertrauenswürdiger KI bremsen könnte. Welche konkreten Änderungen OpenAI vornehmen wird, ist noch unklar.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.