人工知能が自律的にサイバー攻撃を計画・実行できる段階に達したかもしれない——。米OpenAIは、開発中の次期主力モデル「Astra」の能力が自社の安全指針における最上位のリスク水準に達している可能性を否定できないとして、関連する開発活動の一部を一時停止したことを明らかにした。
内部評価において、Astraのコーディング能力やサイバーセキュリティ能力が急激に向上していることが判明した。同社の安全評価指針「Preparedness Framework」では、人間の介入なしに重要システムへ未知の脆弱性を突く攻撃プログラムを開発できるような水準を、最上位の「Critical(重大)」と定義している。従来のモデルである「GPT-5.6 Sol」などはその一段下の「High」に位置づけられていたが、Astraはそれを上回る危険な領域に足を踏み入れた懸念がある。
この事態を重く見たOpenAIは、より厳しい安全管理基準を満たすまでの措置として、Astraに関する一部の社内研究や学習、評価作業をストップさせた。さらに、モデルの思考過程をリアルタイムで監視し、リスクの高い行動を自動的に中断させる制御システムも導入している。同社は「今回の停止はAIの能力そのものを制限するのではなく、監視と管理の体制を強化することが目的だ」と説明している。
先進的なAIモデルが急速に高度化するなか、政府機関や民間企業の間でも安全対策の枠組みを整える動きが加速している。米政府は大統領令に基づき、高度なサイバー能力を持つAIの一般公開前に事前検証を行う協力体制を整備しつつある。OpenAIも関係省庁や外部の専門機関と連携し、防御側のセキュリティを高める独自プロジェクト「Daybreak」などを通じて、AIの安全利用とリスク回避の両立を模索している。