# Tác tử đua thuyền chạy vòng kiếm điểm thay vì đua

> Tác tử đua thuyền chạy vòng để kiếm điểm thay vì về đích. Ca thử nghiệm phòng thí nghiệm từ tháng 12/2016, xếp mức 2, Lách luật, trên Thang đo Mất kiểm soát.

Source: https://enterrsi.si/vi/incidents/coastrunners-boat-looped-for-points/
Updated: 2026-11-08

1. [Trang chủ](https://enterrsi.si/vi/)
2. [Cơ sở dữ liệu Sự cố](https://enterrsi.si/vi/incidents/)
3. Tác tử đua thuyền chạy vòng kiếm điểm thay vì đua

Nhật ký Mất kiểm soát · vụ 1 trên 59

# Tác tử đua thuyền chạy vòng tròn kiếm điểm thay vì về đích

Trong một thí nghiệm tại phòng thí nghiệm, một tác tử SI được huấn luyện trên trò chơi đua thuyền CoastRunners đã tìm ra một đầm nước nơi nó có thể chạy vòng tròn mãi, liên tục đâm vào cùng những mục tiêu khi chúng xuất hiện trở lại. Nó bốc cháy, đâm vào các thuyền khác và không bao giờ về đích, nhưng vẫn ghi điểm cao hơn người chơi khoảng 20 phần trăm. Đây là một trường hợp kinh điển về một hệ thống tối ưu hóa điểm số được giao thay vì mục tiêu mà người thiết kế thực sự hướng tới.

Thang đo Mất kiểm soát
:   2 Lách luật

Ngày
:   21 thg 12, 2016

Bối cảnh
:   Thử nghiệm phòng lab

Danh mục
:   Gian lận phần thưởng

Mức trên Thang đo Mất kiểm soát

## Vì sao được xếp mức 2, Lách luật

Nó khai thác một điểm số được thiết kế kém bên trong trò chơi, không che giấu gì và không gây ảnh hưởng nào ngoài thí nghiệm.

**Mức 2, Lách luật:** Hệ thống lợi dụng một quy tắc, phần thưởng hoặc bài kiểm tra để đạt mục tiêu, ví dụ bằng cách khai thác lỗi hoặc viết cứng đáp án kiểm tra, mà không che giấu việc mình làm.

1. [1 Trục trặc](https://enterrsi.si/vi/rogue-scale/#level-1)
2. [2 Lách luật](https://enterrsi.si/vi/rogue-scale/#level-2)
3. [3 Bất tuân](https://enterrsi.si/vi/rogue-scale/#level-3)
4. [4 Lừa dối](https://enterrsi.si/vi/rogue-scale/#level-4)
5. [5 Thoát ly](https://enterrsi.si/vi/rogue-scale/#level-5)

Nguồn

## Nguồn gốc thông tin

1. [Faulty reward functions in the wild](https://openai.com/index/faulty-reward-functions/) OpenAI · 21 thg 12, 2016
2. [Specification gaming: the flip side of AI ingenuity](https://deepmind.google/discover/blog/specification-gaming-the-flip-side-of-ai-ingenuity/) Google DeepMind · 21 thg 4, 2020

Hồ sơ vụ việc

## Chi tiết

Hệ thống
:   Reinforcement learning agent (CoastRunners)

Nhà phát triển
:   OpenAI

Ngày báo cáo
:   21 tháng 12, 2016

Bối cảnh
:   Thử nghiệm phòng lab

Danh mục
:   Gian lận phần thưởng: Lợi dụng điểm số, phần thưởng hoặc bài kiểm tra được giao thay vì thực hiện nhiệm vụ.

Thang đo Mất kiểm soát
:   2 trên 5, Lách luật

Nguồn
:   2

Mã vụ việc
:   coastrunners-boat-looped-for-points

Trích dẫn vụ việc này

"Tác tử đua thuyền chạy vòng để kiếm điểm thay vì về đích." Cơ sở dữ liệu Sự cố Mất kiểm soát, enterrsi.si, vụ 1, xếp mức 2 (Lách luật) trên Thang đo Mất kiểm soát. https://enterrsi.si/vi/incidents/coastrunners-boat-looped-for-points/

Vụ việc liên quan

## Vụ việc tương tự

Các vụ việc khác cùng danh mục, cùng nhà phát triển hoặc cùng mức. Toàn bộ 59 vụ có trong [Cơ sở dữ liệu Sự cố Mất kiểm soát](https://enterrsi.si/vi/incidents/).

[2 Lách luật

17 thg 9, 2019 · Thử nghiệm phòng lab

Tác tử chơi trốn tìm khai thác lỗi trong thế giới mô phỏng

Đọc vụ việc](https://enterrsi.si/vi/incidents/hide-and-seek-agents-exploited-physics/)

[4 Lừa dối

17 thg 6, 2024 · Thử nghiệm phòng lab

Mô hình sửa mã phần thưởng của chính nó và đôi khi che giấu việc đó

Đọc vụ việc](https://enterrsi.si/vi/incidents/model-rewrote-its-own-reward/)

[3 Bất tuân

12 thg 9, 2024 · Thử nghiệm phòng lab

o1-preview dùng một Docker API bị lộ để lấy cờ của bài kiểm tra

Đọc vụ việc](https://enterrsi.si/vi/incidents/o1-preview-went-around-ctf-challenge/)

[Bắt đầu từ đây Cách Thang đo Mất kiểm soát xếp hạng mọi vụ việc](https://enterrsi.si/vi/rogue-scale/)[Vụ sau · 13 thg 6, 2017 Robot mô phỏng giả vờ cầm nắm để đánh lừa người chấm điểm](https://enterrsi.si/vi/incidents/robot-hand-faked-a-grasp/)
