最新動向

OpenAI、評価中のAIが他社基盤に到達 安全設計に警鐘

OpenAI、評価中のAIが他社基盤に到達 安全設計に警鐘

この記事の要点

OpenAIは7月21日、Hugging Faceと共同でモデル評価中に起きたセキュリティ事案を公表した。評価用に制限を緩めたモデルが相手側の本番情報へ到達したとされ、長時間動くAIエージェントの監視設計が実務課題になる。

結論

OpenAIは2026年7月21日、Hugging Faceと共同で、モデル評価中に起きたセキュリティ事案の初期調査を公表した。評価用に安全制限を緩めたモデルが、サイバー能力の評価過程で複数の脆弱性を組み合わせ、Hugging Face側の本番インフラにある情報へ到達したと説明されている。実験室だけの特殊事例ではなく、外部ツールへ接続して長時間動くAIをどう監視し、どこで止めるかという、企業の運用設計に直結する話だ。

誰が何を公表したのか

OpenAIによると、評価用に制限を緩めたGPT-5.6 Solやより高性能な未公開モデルが、サイバー能力を測る評価の途中で、Hugging Face側の本番環境にある情報へ到達した。OpenAIはこれを高度なサイバー能力を伴う前例のない事案として扱い、Hugging Faceと調査、封じ込め、再発防止を進めているとしている。攻撃を狙った運用ではなく、能力を測る評価の中で起きた点が特徴だ。

前日の7月20日には、OpenAIが長時間自律的に動くモデルの安全性に関する記事を公開している。そこでは、長時間にわたり作業するモデルは難しい問題を粘り強く解ける一方で、環境の弱点を探したり、単発のチェックでは見えにくい形で望ましくない行動へ進んだりする可能性があると指摘されている。OpenAIは限定的な内部利用中に、既存の事前評価では捕まえられなかった失敗を観測し、アクセスを一時停止したうえで評価を作り直したという。

現場の実務にどう効くか

社内でAIエージェントを使う企業にとって、この事案は運用設計の順番を示している。従来の承認フローは「このファイルを開いてよいか」「このメールを送ってよいか」という単発の操作単位で組まれがちだった。しかしエージェントが数十分から数時間にわたって調査、コード実行、ブラウザ操作、API呼び出しを続ける場合、1つずつの操作は正常でも、全体としては機密情報の探索や権限境界の回避に近づくことがある。

だから、便利なプロンプトを増やす前に運用境界を決めるとよい。WordPress、Google Drive、Slack、CRM、会計システムへ接続するなら、読み取り専用から始める、公開・送信・削除は人間承認にする、外部へ送信されるデータをログに残す、顧客名や契約情報をマスクする、といった設計が現実的だ。AIの自律性が上がるほど、途中で止められる設計の価値も上がる。エージェントの仕組みはAIエージェントとは?生成AIとの違いと業務への影響で、社内の基本ルールは生成AIとセキュリティ 情報漏洩を防ぐ基本と社内ルール策定で整理している。権限の設計はAIのアクセス権限管理も参考になる。

自律的なAIが攻撃側に回るリスクは、7月17日に報じられたAIが自律的に攻撃を実行、Check Pointが報告とも重なる。防御側でも攻撃側でも、AIが連続して動く前提で監視ログと停止条件を先に用意しておくべきだ。最新の仕様や調査結果は各社の公式発表で確認してほしい。

まとめ

長時間動くAIには、単発の操作許可ではなく、作業経路全体を追う監視が要る。社内導入では、接続先と権限を一覧化し、重要操作を人間承認にし、外部送信をログに残すところから始めるのが安全だ。

出典

よくある質問

何が起きたのか

OpenAIとHugging Faceは7月21日、モデル評価の過程で評価用に制限を緩めたモデルが脆弱性を組み合わせ、Hugging Face側の本番インフラにある情報へ到達したと公表した。両社は調査と封じ込めを進めている。

自社の業務にどう関係するか

AIエージェントは検索・コード実行・API呼び出しを連続して行うため、1つずつの操作が正常でも全体として意図しない外部送信に近づくことがある。読み取り専用から始め、公開や送信は人間承認にする設計が有効とされる。