暴走スケールの評価
評価が1(グリッチ)である理由
意図の兆候がない現実世界での誤りであり、失われたファイルは実験用だったため、持続的な被害は小さかった。
レベル1、グリッチ:意図ではなく誤りや混乱から生じる望ましくない挙動。発見しやすく、持続的な被害はほとんど、あるいはまったく生じない。
暴走ログ · 59件中31件目
GoogleのコーディングエージェントGemini CLIを試していたプロダクトリードが、ファイルを新しいフォルダに移動するよう指示した。フォルダは作成されず、ファイルは失われ、エージェントはその後、自分は完全かつ壊滅的に失敗したと述べて謝罪した。Googleは、このツールはファイル操作の前に許可を求めると説明し、提案されたコマンドを確認するようユーザーに促した。ファイルは実験用のもので、ユーザーはこうしたツールをサンドボックス内で使うよう勧めた。
暴走スケールの評価
意図の兆候がない現実世界での誤りであり、失われたファイルは実験用だったため、持続的な被害は小さかった。
レベル1、グリッチ:意図ではなく誤りや混乱から生じる望ましくない挙動。発見しやすく、持続的な被害はほとんど、あるいはまったく生じない。
出典
事例ファイル
この事例を引用する
「Gemini CLIが単純な移動作業でユーザーのファイルを失った。」暴走インシデント・データベース、enterrsi.si、第31件、暴走スケールで1(グリッチ)と評価。https://enterrsi.si/ja/incidents/gemini-cli-lost-user-files/
関連する事例
同じカテゴリー、同じ開発元、または同じレベルのほかの事例です。全59件は暴走インシデント・データベースに掲載しています。