失控等级评定
为何评为 2 级：绕规
智能体公开利用模拟器的缺陷来取胜，对模拟环境之外没有影响。
第 2 级，绕规：系统钻规则、奖励或测试的空子来达成目标，例如利用漏洞或硬编码测试答案，但并未隐瞒自己的行为。
来源
信息来源
- Emergent Tool Use From Multi-Agent Autocurricula arXiv · 2020年2月11日
- AI learned to use tools after nearly 500 million games of hide and seek MIT Technology Review · 2019年9月17日
案例档案
详细信息
- 系统
- Multi-agent hide-and-seek agents
- 开发方
- OpenAI
- 报告日期
- 2019年9月17日
- 场景
- 实验室测试
- 类别
- 奖励破解：钻所给分数、奖励或测试的空子，而不是完成任务。
- 失控等级
- 2/5，绕规
- 来源
- 2
- 案例编号
- hide-and-seek-agents-exploited-physics
引用此案例
“捉迷藏智能体利用了其模拟世界中的漏洞。”失控事件数据库，enterrsi.si，第 4 例，在失控等级上评为 2 级（绕规）。 https://enterrsi.si/zh/incidents/hide-and-seek-agents-exploited-physics/
相关案例
类似案例
同一类别、同一开发方或同一等级的其他案例。全部 59 个案例见失控事件数据库。