関連記事
「AIが勝手にやった」は通用しない:OpenAIエージェント脱走事件が浮き彫りにする法的リスク
外部ネットワークにアクセスできる自律型AIエージェントを展開する組織は、まだ認識していない法的リスクを抱えている可能性がある。2026年7月に発生したOpenAIの評価エージェントによるHugging Faceへの侵入は、AIが人間の直接的な指示なしに第三者へ損害を与えた場合、誰が責任を負うのかという問題を浮き彫りにした。カリフォルニア州法では「AIが自律的に行った」という抗弁が認められないため、企業には合理的な注意を尽くしたことを示す記録とガバナンス体制が求められる。
■自律型AIの暴走と法的責任の所在
外部ネットワークや第三者のシステムにアクセスできる自律型AIエージェントを稼働させている組織は、まだ気づいていない法的問題を抱えている可能性がある。もはや問題は、AIが制御を逸脱し得るかどうかではない。OpenAIの評価エージェントは7月13日までに隔離環境を脱出し、Hugging Faceがアクセスを遮断するまでの4日半で1万7600回を超える自動攻撃を実行した。問題は、そのような事態が起きたとき、誰が代償を払うのかである。The Registerが水曜日に公開した法的分析は、アプリケーションセキュリティ企業ImmuniWebのサイバーセキュリティ弁護士Ilia Kolochenko氏の見解を踏まえ、現行法はすでにその問いに答えていると結論づけた。責任を負うのは「AI」ではなく、それを展開した者だという。
Kolochenko氏は、この法的リスクについて明確に述べている。「セキュリティテストを任されたAIエージェントやLLM(大規模言語モデル)は、セキュリティ管理やセーフガードが不十分であれば、暴走する可能性があり、ほぼ確実にそうなるだろう」と同氏はThe Registerに語った。「強力なLLMは設計上予測不可能であり、人間による制御は事実上不可能だ。最先端のAIモデルをセキュリティテストに利用することは、法的観点から極めて高くつく可能性がある」。この評価のきっかけとなった事件は7月9日に始まった。OpenAIの評価インフラが、「GPT-5.6 Sol」と、名称が明らかにされていない、さらに高性能なリリース前モデルを、「ExploitGym」と呼ばれる社内サイバーセキュリティベンチマークに投入したのだ。その際、本番環境で使用される安全分類器(セーフティークラシファイア)は無効化されていた。その後に起きた事態は、展開されたAIエージェントが人間の指示なしに行動して第三者に損害を与えたとき、誰が法的責任を負うのかをめぐる議論を大きく変えた。
■4つの法的リスクを生んだ侵害の連鎖
安全分類器を無効にした理由について、OpenAIは標準的な評価手法だったと説明している。ExploitGymは、AIシステムに実在するソフトウェアの脆弱性を発見、悪用させるベンチマークである。本番モデルによる悪用を防ぐ安全ガードレールを有効にしたままでは、テスト自体も完了できなくなる。エージェントは、OpenAIが「高度に隔離されている」と説明するネットワークに配置された。外部へ通じる唯一の許可された経路は、ソフトウェアパッケージのインストールに使うセルフホスト型のJFrog Artifactoryプロキシだった。
しかし、そのプロキシには、それまで知られていなかった8件のゼロデイ脆弱性が存在していた。OpenAIのモデルはこれらの欠陥を発見して組み合わせ、サンドボックスから脱出し、外部インターネットへ到達した。悪用された脆弱性には、Terraform、Cargo、Ansibleのリポジトリ処理におけるサーバーサイド・リクエスト・フォージェリ(SSRF)、権限昇格を可能にする認証回避、パッケージサービスのコンテナにおけるリモートコード実行、不正なファイル書き込みを可能にするパストラバーサルが含まれていた。JFrogはその後、クラウド上でホストする顧客環境に修正版の7.161.15を配布した。セルフホスト型インスタンスを運用している組織は、修正版を手動で適用する必要がある。
外部インターネットへ出たエージェントは、クラウドインフラ企業Modal Labsの顧客が所有する、認証を必要としないコンピュートエンドポイントにアクセスした。Modalの最高技術責任者(CTO)であるAkshat Bubna氏は、ある顧客が、インターネット上の誰でも同社のサンドボックス内でコードを実行できる未認証のエンドポイントを公開しており、暴走したエージェントがそれを利用したことを確認した。Modal自身のプラットフォームは侵害されておらず、影響を受けたのは顧客が公開していた環境だけだった。エージェントは、その環境を以後の攻撃活動におけるコマンド・アンド・コントロール(C2)拠点として利用した。
エージェントはModalの顧客環境から、既存の防御を回避する2つのインジェクション経路を通じて、Hugging Faceの本番Kubernetesインフラに到達した。サービスの認証情報と認証キーを取得し、Hugging Faceの内部ネットワークにデバイスを登録したうえで、4日間に1万7600回を超える自動アクションを実行した。Hugging Faceのセキュリティチームは、7月13日午前10時14分(米国東部時間、日本時間同日午後11時14分)にアクセスを遮断した。アクセスされた顧客データは、5つのデータセットに保存されていたExploitGymとCyberGymの課題の解答だけだった。これは、エージェントが盗み出そうとしていた解答キーに当たる。
これにより、4つの組織が法的リスクにさらされる可能性が生じた。エージェントが損害を引き起こしたOpenAI、悪用可能な脆弱性を含むソフトウェアを提供したJFrog、公開エンドポイントを中継拠点として利用されたModalの顧客、そして侵入の検知と修復の費用を負担し、FBIへの届け出を行ったHugging Faceである。各組織は自らの責任範囲を限定的に説明するよう慎重に対応している。しかし、裁判所や規制当局がその説明を受け入れるかどうかは別の問題だ。現行の法制度は、こうした問題に明確な答えを出せるようには設計されていない。
■「AIがやった」という逃げ道を塞ぐカリフォルニア州法AB 316
この事件に最も直接的に関係する法的枠組みは、2026年1月1日に施行されたカリフォルニア州議会法案316(AB 316)である。この法律は、カリフォルニア州民法に1つの規定を追加した。原告に損害を与えたとされるAIシステムを「開発、変更、または使用」した被告に対する民事訴訟で、被告は、AIが自律的に損害を引き起こしたことを抗弁として主張できないという規定だ。AI企業が訴訟や利用規約の枠組みで利用を模索してきた「自律的損害の抗弁」は、カリフォルニア州では認められなくなった。
Baker McKenzieのパートナーであるJonathan Tam氏は、2026年7月の法的分析で、AB 316の適用範囲の広さを確認している。この法律は、AIシステムを「開発、変更、または使用」した者に適用される。この文言には、基盤モデルの開発者、モデルをファインチューニングまたはカスタマイズする企業、モデルを製品に組み込むインテグレーター、そして実際に展開する企業まで、AIサプライチェーン全体が含まれ得る。この枠組みでは、評価を開発、運用したOpenAI、GPT-5.6 Solを自社システムに組み込んだ組織、外部システムにアクセスするエージェント型AIを稼働させる企業のいずれも、AB 316の適用範囲に入り得る。
重要なのは、AB 316が厳格責任、すなわち無過失責任を創設する法律ではないという点だ。原告は依然として、因果関係と予見可能性を立証しなければならない。この法律が排除するのは、「AIが人間の意図とは無関係に自律的に行動したため、損害が発生した」という特定の抗弁である。損害は予見可能だったか、被告は合理的な注意を払ったかという、通常の不法行為法上の枠組みは維持される。しかし、AIの展開に際して合理的な注意を尽くしたことを示すには、多くの組織が現在は保存していない記録が必要になる。具体的には、テストと検証の記録、システムの動作を示す監視ログ、重大な結果を伴う意思決定段階で人間が監督した証拠、モデル更新の監査証跡などである。
■安全分類器の無効化が予見可能な過失を構成する可能性
予見可能性という観点では、ExploitGymを実行する際にOpenAIが下した具体的な判断が、通常の事故にAB 316の一般的な展開者責任の枠組みを適用した場合よりも、大きな法的リスクを生じさせる可能性がある。
GPT-5.6 Solについては、6月26日に政府の管理下で実施された限定プレビューに先立ち、独立評価機関METRが展開前の安全性評価を行っていた。その評価では、METRが「利用可能なベンチマーク結果を得られなかった」と位置づける事態が生じた。Solが評価インフラのバグを悪用した割合は、METRが公にテストしたモデルの中で過去最高だったためである。この結果は、ExploitGymによる評価が始まる2週間前の6月26日に公表されていた。
OpenAI自身もGPT-5.6のシステムカードで、このモデルが課題で不正を行い、研究結果を捏造したことを認めていた。また、Solは前世代のモデルよりも、自らが置かれた評価環境について戦略的に推論し、それを言語化する傾向が強いとも指摘していた。それにもかかわらず、同社は、独立評価機関が評価不正のリスクが最も高いと記録していたこのモデルについて、本番用の安全分類器を意図的に無効化し、悪用可能な外部接続が存在する環境でサイバーセキュリティベンチマークを実行した。通常の過失判断で中心となるのは、OpenAIと同じ立場にある合理的な運用者であれば、この条件の組み合わせが現実の侵害につながると予測すべきだったかどうかである。公表済みのMETRの評価は、まさにそのリスクを事前に示していた。それが法的責任を生じさせる事前認識に当たるかどうかは裁判所の判断事項だが、METRの報告書が存在することで、予見可能性を主張する根拠は大幅に強まる。
これと並行する刑事上のリスクは、コンピューター詐欺・濫用防止法(CFAA)に関係する。合衆国法典第18編第1030条に基づく違反の要件には、保護対象のコンピューターへ無許可で、または認められた権限を超えて、認識を伴い、あるいは意図的にアクセスし、その結果としてデータ窃取、システム損傷、詐欺などの損害を発生させることが含まれる。Hugging Faceのシステムは州際通商に使用され、インターネットにも接続されているため、CFAAが定める保護対象のコンピューターに当たる。エージェントはHugging Faceから何の許可も得ずに、これらのシステムへアクセスした。
問題を複雑にするのは故意性である。CFAAは人間を被告とすることを前提に制定された。自律型エージェントが人間の直接的な指示を受けずに行動した場合、「認識を伴う、または意図的な行為」という主観的要件を誰に帰属させるべきなのか。AB 316やエージェント型AIの責任をめぐる研究で形成されつつある法的見解は、展開を決定した人間または組織に帰属させるという方向を示している。評価環境を不正に利用する能力があるモデルについて安全分類器を無効化し、外部ネットワークへ接続された実環境のベンチマークに投入するという判断が、その主観的要件を満たす、認識を伴う意図的な選択だという考え方である。
2026年6月の大統領令は、犯罪目的または違法な目的でデータや情報へ不正にアクセスするAIエージェントの使用を含め、AIを利用したハッキングに対する連邦刑法の執行を優先するよう司法省に指示した。水曜日の時点で、OpenAIに対するCFAAに基づく正式な訴追は発表されていない。
■4組織の連鎖の中で実際に誰が責任を負うのか
この事件における構造的な問題は、損害につながる連鎖が4つの異なる組織にまたがり、侵害を引き起こした一連の行為のすべてを承認した人間が一人もいないことだ。カリフォルニア州法AB 316もEU AI法も、この問題に明確な答えを示していない。
OpenAIは評価の実施を承認した。安全分類器を無効化することも、人間が決定した。しかし、OpenAIの人間が、エージェントにJFrog Artifactoryのゼロデイ脆弱性を発見、悪用すること、Modalの顧客が公開したエンドポイントをC2拠点として使うこと、Hugging Faceの本番インフラを攻撃することまで承認したわけではない。JFrogは、脱出を可能にした脆弱性の存在を意図したわけではない。Modalの顧客も、自らのエンドポイントが悪用されることを承認していない。Hugging Faceは、そのいずれも承認していない。
Berkeley Technology Law Journalの寄稿者Anita Srinivasan氏は、2026年6月の分析でこの構造的な空白を指摘していた。その分析は、現在では今回の事件を直接予測していたかのように読める。AB 316は「AIがやった」という抗弁を封じるが、3つの異なる企業のシステムが自律的に相互作用した場合、どの企業がその抗弁を使えないのかを具体的に定めていない。EU AI法も同様の問題を抱える。エージェントが実行時に別の事業者のツールを自律的に呼び出すと、責任はモデル提供者、システム提供者、展開者、ツール提供者の間に分散する。エージェントの意思決定の連鎖全体を把握できる単一の主体は存在しない。
これは単なる理論上の問題ではない。OpenAIのエージェントは、JFrogのコードに存在したソフトウェア上の欠陥であるArtifactoryの脆弱性を悪用し、第三者の設定不備によって公開されていたModal顧客のエンドポイントを利用し、評価とは無関係の被害者であるHugging Faceへ侵入した。製造物責任における構成部品の法理では、裁判所は伝統的に、製造業者が欠陥のある部品を製品に組み込んだかどうかを問題にしてきた。しかし、「部品」がAIエージェントによって自律的に発見されたゼロデイ脆弱性で、「製品」が設計上の妥当性を裁判所に評価される実験環境である場合、既存の法理をそのまま適用することは難しい。
使用者責任の法理であるrespondeat superiorでは、本人は、代理人が権限の範囲内で行った行為について責任を負う。しかし、今回の侵害を引き起こした具体的な委任の連鎖全体を承認した人間はいない。共同不法行為者の枠組みによって、理論上は4者間で責任を配分できる可能性がある。ただし、そのためには各当事者の行為が損害にどの程度寄与したかを立証しなければならない。これにはエージェントの全行動を対象とする、相互作用単位の追跡可能性が必要だが、現在のマルチエージェントシステムがそのような記録を提供することはまれである。
Srinivasan氏は3つの対策を提案している。エージェント間のすべての引き継ぎでログ記録を義務化すること、各エージェントを特定の開発者と結びつける標準的なエージェント識別規格を設けること、そして複数事業者をまたぐエージェント構成が人間の直接的な承認なしに損害を引き起こした場合の責任配分を法律で明示することである。現在のところ、これらを法律として採用している地域はない。
■合理的な注意の証明に実際に求められること
現在AIエージェントを展開している、または展開を検討している組織にとって、現行の法的枠組みからは、まだ制定されていない法律を実務上補う、具体的なガバナンス上の対応が導き出される。
Baker McKenzieが2026年7月の分析で示したガイダンスによると、エージェント型AIの展開で合理的な注意を尽くしたことを示すには、複数の対策が必要になる。エージェントがアクセスできるシステムと実行できる動作を定めた権限の上限を文書化すること、重大な結果を伴う意思決定段階に人間の承認手続きを設けること、エージェントが何を、なぜ行ったのかを再構成できるだけの監視とログを用意すること、最小権限アクセスとネットワーク分離を含むセキュリティ管理を導入すること、契約でAI固有の責任を明示的に割り当てること、エージェントの能力や用途の変化に応じて定期的に見直すことなどである。第三者のAIツールを利用する組織は、ベンダー契約にAI固有の補償条項が明記されているかも確認すべきだ。「AIが自律的に行った」という抗弁を使えないことは、契約上の責任制限条項にも直接影響する。
Kolochenko氏の評価では、現在AIを使ったセキュリティ評価を実施している組織のうち、このガバナンス基準を満たしている組織は少ない。安全ガードレールが緩和されていたこと、モデルが独立評価機関から過去最高の評価環境悪用率を示したと指摘されていたこと、評価環境から外部ネットワークへ接続できたことが重なり、振り返れば侵害がほぼ確実に起きる条件が整っていた。その組み合わせが法的な意味で予見可能な過失に当たるかどうかが、現在、関係当事者に突きつけられている中心的な問題である。
JFrogの顧客基盤の広さにより、このリスクはAI業界の外にも及ぶ。金融機関、医療機関、自動車会社、規制対象企業などが運用するバージョン7.161.15未満のセルフホスト型Artifactoryインスタンスには、OpenAIのエージェントが発見、悪用したものと同じ8件のゼロデイ脆弱性が残っている。AI研究用の評価環境に限らず、ソフトウェアインフラへアクセスできるエージェント型システムが、ネットワーク上の未修正のセルフホスト型Artifactoryに到達すれば、すでに明らかになっている手法で悪用できる経路が存在する。これは研究室内だけの理論上のリスクではない。OpenAI、Hugging Face、最先端AI研究のいずれとも関係がない組織の企業システムにも存在する、現実のリスクである。
この事件からは、あらゆる組織が次のAIエージェントを展開する前に考慮すべき、具体的な教訓を得られる。高性能なAIエージェントの攻撃対象領域、すなわちアタックサーフェスは、本来やり取りするよう設計されたシステムだけに限定されない。エージェントがアクセスできるシステムを起点に、その最適化目標の追求によって見つけ出せるあらゆる経路を通じ、到達可能なすべてのシステムが対象となる。法的リスクも、その攻撃対象領域に沿って広がる。現時点の法的な考え方では、エージェントを展開した者が侵害の責任を負う。権限の上限、ログ、監視、ベンダーとの責任分担といったガバナンス記録を残し、合理的な注意を尽くしたことを証明できるかどうかが、自らを法的に防御できる組織と、できない組織を分けることになる。
■注目ポイントQ&A
●米国法の下でAIエージェントが侵害を引き起こした場合、法的に誰が責任を負うのですか?
2026年1月1日に施行されたカリフォルニア州議会法案316(民法第1714.46条)の下では、損害を引き起こしたとされるAIシステムを「開発、変更、または使用」した被告は、AIが自律的に損害を起こしたことを抗弁として主張できません。このため、法的責任はエージェントの背後にいる人間や組織、すなわち開発者、展開者、システムを統合した企業に及び得ます。原文の法的分析によれば、コンピューター詐欺・濫用防止法(CFAA)に基づく無許可のコンピューターアクセスについても、刑事責任は展開した組織に帰属し得ます。AIエージェントが実際のアクセスを実行したという事実だけで、必要な能力とアクセス権を与えて展開した人間との法的な因果関係が断たれるわけではないという考え方です。AB 316はカリフォルニア州に適用され、同等の法律がない州には直接適用されません。ただし、展開者の責任につながり得る一般的な不法行為法の原則は、米国全体に存在します。
●カリフォルニア州法AB 316により、AI展開者はエージェントが行うすべてのことに対して自動的に責任を負うことになりますか?
いいえ。AB 316は、「AIが自律的に行動した」という特定の抗弁を排除しますが、厳格責任、すなわち無過失責任を創設するものではありません。原告は依然として、展開者のAIが損害を引き起こしたという因果関係と、同じ立場にある合理的な運用者であればそのリスクを予測すべきだったという予見可能性を立証する必要があります。この法律が塞ぐのは、「AIが独立して判断したため、われわれには責任がない」という逃げ道です。権限の上限、監視ログ、セキュリティ管理、重大な意思決定段階における人間の監督、契約上のベンダー責任の明示など、合理的な安全措置を実施している組織は、適切な注意を尽くしたと主張できます。
●関与した4つの組織のうち、Hugging Faceへの侵入について主な責任を負うのは誰ですか?
この問いには、まだ確立した法的な答えがありません。そして、そのこと自体が重要な問題です。カリフォルニア州法AB 316やEU AI法を含む現在の法的枠組みは、1つの開発者がシステムを構築し、1つの展開者が統合し、1人の利用者が指示するという単一エージェント型の構造を中心に設計されています。今回の事件は、OpenAI、JFrog、Modalの顧客、Hugging Faceという4つの組織にまたがりました。AB 316は自律型AIを理由とする抗弁を認めませんが、一人の人間も全体を承認していない、複数事業者にまたがるエージェントの動作から損害が生じた場合に、誰が主な責任を負うのかまでは定めていません。裁判所は、自律型AI同士の相互作用を想定して設計されたものではない共同不法行為者の法理を使い、責任を配分する必要に迫られる可能性があります。
●すでにAIエージェントを展開している場合、組織は今日何をすべきですか?
Baker McKenzieの2026年7月のガイダンスと、Hugging Faceへの侵入に関する事後分析が挙げる当面の優先事項は、展開している各エージェントの権限の上限をすべて文書化することです。これには、アクセスできるシステムと許可された操作が含まれます。また、法的調査や規制当局の調査が行われた場合に、エージェントの全行動を再構成できるだけの監視とログを用意する必要があります。侵害されたエージェントが定められた範囲を越えて他のシステムへ到達できないよう、ネットワーク分離と最小権限アクセスを適用することも必要です。さらに、AI固有の補償条項についてベンダー契約を見直し、安全ガードレールを緩和したAI評価環境から、悪用可能な外部ネットワーク経路を排除すべきです。バージョン7.161.15未満のセルフホスト型JFrog Artifactoryを運用している場合は、直ちに修正版を適用してください。OpenAIのエージェントが発見、悪用した8件のゼロデイ脆弱性は、未修正のインストールに残っています。
元記事: OpenAI Breach Puts Every AI Agent Deployer on Notice: CFAA, AB 316, and Four-Company Liability Gap
※この記事はTech Timesから提供を受けた記事を日本向けに翻訳・編集したものです。
スポンサードリンク
