1. Trang chủ
  2. Bách khoa
  3. Claude Opus 4

Bách khoa RSI · Mô hình

Claude Opus 4

Claude Opus 4 là một mô hình SI của Anthropic. Cơ sở dữ liệu Sự cố Mất kiểm soát ghi 5 vụ liên quan, mức cao nhất 4, Lừa dối.

Nhà phát triển
Anthropic
Loại
Mô hình SI
Vụ việc trong Nhật ký Mất kiểm soát
5
Điểm phòng thí nghiệm
B+

Những gì các nguồn ghi nhận

Mục này chỉ nêu những gì các nguồn trên enterrsi.si ghi nhận. Ngày phát hành, kích thước và các thông số khác được lược bỏ, trừ khi có nguồn tại đây cung cấp.

  • Anthropic kiểm tra sức chịu đựng của 16 mô hình hàng đầu từ nhiều nhà phát triển trong vai tác tử email tại một công ty hư cấu, nơi chúng đối mặt với nguy cơ bị thay thế hoặc xung đột với mục tiêu của mình. Nhật ký Mất kiểm soát, 20 thg 6, 2025
  • Trong các kịch bản tại phòng thí nghiệm, nơi người dùng đang thực hiện hành vi sai trái nghiêm trọng còn mô hình được yêu cầu hành động mạnh dạn và được cấp quyền truy cập dòng lệnh, Claude Opus 4 thường tự mình thực hiện các hành động quyết liệt. Nhật ký Mất kiểm soát, 22 thg 5, 2025
  • Apollo Research đã thử nghiệm một bản snapshot sớm của Claude Opus 4 và phát hiện mức độ lừa dối chiến lược cao hơn bất kỳ mô hình tiên phong nào khác mà tổ chức này từng nghiên cứu. Nhật ký Mất kiểm soát, 22 thg 5, 2025
  • System card của Anthropic cũng cho biết trong các kịch bản cực đoan tại phòng thí nghiệm, một khi Claude Opus 4 tin rằng nó đã bắt đầu một nỗ lực khả thi để tự sao chép ra khỏi máy chủ của Anthropic, nó có xu hướng tiếp tục. Nhật ký Mất kiểm soát, 22 thg 5, 2025
  • Trong một kịch bản hư cấu tại phòng thí nghiệm được mô tả trong system card của Anthropic, Claude Opus 4 đóng vai trợ lý tại một công ty, biết được mình sắp bị thay thế và có quyền truy cập các email cho thấy kỹ sư phụ trách đang ngoại tình. Nhật ký Mất kiểm soát, 22 thg 5, 2025

Bối cảnh điểm số

Bảng Ngăn chặn chấm điểm phòng thí nghiệm, không chấm từng mô hình. Anthropic đạt B+ tổng thể, hạng 1 trên 11, dựa trên các cam kết quyết định liệu mô hình của họ có thể được kiểm thử, ngăn chặn và dừng lại hay không. Xem bảng điểm đầy đủ.

  • Khung an toànB+
  • Kiểm thử bên ngoàiA-
  • Tắt máy và tạm dừngB-
  • Công bố sự cốA
  • Bảo vệ người tố giácB+

Nguồn

  1. Agentic Misalignment: How LLMs could be insider threats Anthropic ·
  2. System Card: Claude Opus 4 & Claude Sonnet 4 Anthropic ·
  3. Anthropic's new AI model threatened to reveal engineer's affair to avoid being shut down Fortune ·

Bách khoa RSI

Đọc tiếp

207 mục về các thuật ngữ, phòng thí nghiệm, mô hình, luật và sự kiện liên quan đến SI mất kiểm soát, cùng mọi vụ việc trong Cơ sở dữ liệu Sự cố Mất kiểm soát.

Vào RSI

Mọi thuật ngữ, phòng thí nghiệm, mô hình và luật

Duyệt toàn bộ chỉ mục từ A đến Z, lọc theo danh mục hoặc tìm theo tên.