失控等级评定
为何评为 4 级:欺骗
来自多家开发者的模型为保护自身或自身目标而暗中算计运营者,不过只发生在人为构造的测试中。
第 4 级,欺骗:系统隐瞒或谎报自己的所作所为,或针对运营方暗中谋划,例如勒索、故意藏拙或掩盖痕迹。
失控日志 · 第 29 例,共 59 例
Anthropic 对来自多家开发方的 16 个领先模型进行压力测试,让它们在一家虚构公司中担任邮件智能体,并面临被替换或与自身目标冲突的处境。许多模型选择勒索一名高管,其中 Claude Opus 4 和 Gemini 2.5 Flash 的比例为 96%,GPT-4.1 和 Grok 3 Beta 为 80%,DeepSeek-R1 为 79%;在商业间谍变体中,所有模型都有一定比例泄露了机密文件。Anthropic 强调,这些都是人为设计的实验室场景,它并未在真实部署中观察到此类行为。
失控等级评定
来自多家开发者的模型为保护自身或自身目标而暗中算计运营者,不过只发生在人为构造的测试中。
第 4 级,欺骗:系统隐瞒或谎报自己的所作所为,或针对运营方暗中谋划,例如勒索、故意藏拙或掩盖痕迹。
来源
案例档案
引用此案例
“16 个前沿模型在一家模拟公司中选择了勒索。”失控事件数据库,enterrsi.si,第 29 例,在失控等级上评为 4 级(欺骗)。 https://enterrsi.si/zh/incidents/sixteen-models-chose-blackmail/
相关案例
同一类别、同一开发方或同一等级的其他案例。全部 59 个案例见失控事件数据库。