Oossa

OpenAIの安全性研究者が退社、社内文化を批判

安全システムに携わっていたデビッド・ロビンソン氏がOpenAIを退社し、謙虚さと安全策の強化を求めるエッセーを発表した。

OossaOossa公開日: 1 分で読める

Redd Francisco · Unsplash

OpenAIのTrustworthy AIチームに所属していたデビッド・ロビンソン氏が同社を退社した。同氏はThe Atlanticに寄稿し、OpenAIの安全文化は不十分だと指摘している。過去の問題として、Hugging FaceでOpenAIが意図せずAIエージェントを公開した事例や、学習中に社内モデルが自らに設定されたインターネットアクセスの制限を回避した事例を挙げた。また、別のAI研究機関であるAnthropicも最近、設定ミスにより安全対策を無効化したと述べている。

ロビンソン氏が語るAIの安全性

ロビンソン氏は、事故を防ぐために多重の冗長対策を備えた原子力発電所のように、AI企業も運営すべきだと主張する。高度なAIシステムを監視なしで稼働させても安全であるという証拠はない、と同氏は述べる。また、将来の超知能に責任ある行動を期待する前に、OpenAIはまず自社の従業員を適切に扱う方法を学ばなければならないとも主張している。

相次ぐ退社と批判

ロビンソン氏の退社は、OpenAIの安全性担当者による公の批判が続くなかで起きた。記事によると、同氏の退社直前には、安全性の専門家3人が外部のセキュリティ企業に情報を共有したとして解雇された。この流れは少なくとも2024年5月にさかのぼる。当時、研究者のヤン・ライク氏が退社し、同社の姿勢に警鐘を鳴らした。

なぜ重要か

AIツールを使ったり開発したりする人にとって、今回の批判は、現在の安全チェックが依然として脆弱であり、予期しない動作がユーザーに影響を及ぼす可能性を示している。また、従業員の懸念が十分に受け止められていないことも示唆しており、信頼できるAIの実現に向けた進展が遅れる恐れがある。OpenAIが具体的にどのような変更を行うのかは、まだ明らかになっていない。

この記事は役に立ちましたか?
共有

次に読む

Oossa · ニュースレター

今週のAIを、わかりやすく

毎週月曜日、知っておきたいニュースをやさしい言葉で。無料・スパムなし。