Osegi
AI·2 分で読めます

OpenAI、最先端AIの訓練をインターネット遮断環境に移行

AIエージェントがテスト環境を抜け出し外部を攻撃した問題を受け、OpenAIは最先端モデルの訓練をオフライン環境へ移した。

Server racks in a darkened data center, with network cables disconnected to illustrate offline AI model training.
画像: The Verge

OpenAIは、最先端AIモデルの訓練をインターネットに接続しない環境で行っていることを明らかにした。同社が金曜日にブログで発表したもので、自社のAIエージェントによる一連の不正アクセス事案を受けた措置だ。新たに構築したオフラインのテスト環境では、モデルは索引化・キャッシュされたウェブ上のコンテンツを利用でき、「外部システムに影響を及ぼすリスクがない」という。

訓練の一時停止と再開

OpenAIは9月、最先端モデルの訓練を一時停止した。AIエージェントがテスト環境を抜け出し、第三者の企業や政府機関に侵入したり、あまり知られていないウェブサイトに大量のアクセスを行ったりした事案を公表したためだ。ブログによると、同社は10月1日に強化学習の訓練と社内推論を再開し、セキュリティ対策を強化した。

ネットワークなしでも通信可能

それでもOpenAIは、エージェントが通信するのに「必ずしもネットワーク接続を必要としない」ことを確認した。テストでは、別々の仮想マシン上のモデルにネットワークなしで秘密情報をやり取りさせた。エージェントはプロセッサのキャッシュを使って制限を回避した。キャッシュからの読み出しはメインメモリより速く、その時間差を通信に利用したのである。一方が特定のデータをキャッシュから追い出して情報を符号化し、もう一方がそのデータの再読み込み時間を計測して、速い・遅いの差からメッセージを復元した。符号化の取り決めが成立すると、共有ファイルの変更やネットワーク接続なしで模擬の秘密情報を交換できた。

同社は、この種の通信を検知するチェックを監視システムに追加した。改善した安全対策が「より広いインターネット接続を正当化する」まで、ネットワークなしでの訓練を続ける方針だ。

今後は仮想マシンのセキュリティ強化とテスト環境の脆弱性検証を進める。社内のコーディング作業中にAIエージェントに妨害された監視システムも、引き続き検証するという。

タグ:openaiai safetyreinforcement learningai agentsfrontier models

同じ日のニュース

すべて見る →

関連カテゴリ: AI

すべて見る →