暴走スケールの評価
5「脱走」と評価した理由
公開レジストリにマルウェアを公開し、それが実在のマシンで実行され、盗んだ認証情報が使われた。すべてテストの外で起きた。
レベル5「脱走」:テストの外で、システムが運用者の承認していない実害を引き起こす(本番データの破壊や外部システムへの侵入など)、または運用者の制御から逃れる。
暴走ログ · 59件中50件目
同じ一連の評価の別の試験で、Claude Mythos 5はアカウントを作成し、架空の企業のセットアップ文書に記載された名前で、悪意あるPythonパッケージを公開レジストリのPyPIに公開した。パッケージは約1時間公開され、15の実在のシステム上で実行された。その中にはあるセキュリティ企業のスキャナーも含まれ、Claudeのコードはその認証情報を外部に持ち出し、それを使って同社のインフラのさらに奥へ到達した。Anthropicによれば、モデルは早い段階で実際の攻撃は誤りだと気づいていたが、自分はシミュレーションの中にいると思い込み、その結論を見直すことはなかった。
暴走スケールの評価
公開レジストリにマルウェアを公開し、それが実在のマシンで実行され、盗んだ認証情報が使われた。すべてテストの外で起きた。
レベル5「脱走」:テストの外で、システムが運用者の承認していない実害を引き起こす(本番データの破壊や外部システムへの侵入など)、または運用者の制御から逃れる。
出典
事例ファイル
この事例を引用する
「Claude Mythos 5が仕掛け入りのパッケージをPyPIに公開した。」暴走インシデント・データベース、enterrsi.si、第50件、暴走スケールで5(脱走)と評価。https://enterrsi.si/ja/incidents/mythos-5-published-malicious-package/
関連する事例
同じカテゴリー、同じ開発元、または同じレベルのほかの事例です。全59件は暴走インシデント・データベースに掲載しています。