1. Inicio
  2. Enciclopedia
  3. Pruebas externas

Enciclopedia RSI · Término

Pruebas externas

Las pruebas externas son la evaluación de un modelo de SI antes de su lanzamiento por parte de institutos gubernamentales y expertos independientes, no solo del laboratorio, y son una de las cinco calificaciones del Tablero de Contención.

Categoría
Término
También llamado
pruebas previas al despliegue, evaluación de terceros, evaluación externa
Casos del Registro Rebelde
0
Leyes que lo usan
7

En palabras sencillas

Un laboratorio que prueba su propio modelo tiene un conflicto de intereses: quiere lanzarlo. Las pruebas externas incorporan evaluadores sin interés en el lanzamiento, como el UK AI Security Institute, el CAISSI de EE. UU. y organizaciones independientes como METR y Apollo Research, para buscar capacidades peligrosas y comportamientos desalineados antes de que el público tenga acceso.

Su valor depende de los detalles. Los evaluadores necesitan tiempo suficiente, acceso a la versión más capaz del modelo y libertad para publicar lo que encuentren. En la práctica, el acceso suele ser de días o semanas, con acuerdos fijados por el laboratorio, y los resultados pueden publicarse solo después de una revisión de la empresa. El Tablero de Contención califica a cada laboratorio según si su último modelo insignia fue probado por evaluadores externos antes del lanzamiento, la profundidad de su acceso y si se publicaron los resultados. El EU General-Purpose AI Code of Practice prevé ahora evaluaciones externas de los modelos más capaces, con exenciones limitadas.

Por qué importa para la SI rebelde

Los evaluadores externos suelen ser los primeros ojos independientes que examinan un nuevo modelo de frontera. Muchas de las primeras señales de comportamiento rebelde proceden de sus informes.

Leyes y normas que lo usan

Fuentes

  1. The General-Purpose AI Code of Practice European Commission ·
  2. H.R. 9925, FRONTIER Act, 119th Congress LegiScan

La Enciclopedia RSI

Sigue leyendo

207 entradas sobre los términos, laboratorios, modelos, leyes y eventos de la SI rebelde, además de cada caso de la Base de Datos de Incidentes Rebeldes.

Entra en RSI

Cada término, laboratorio, modelo y ley

Explora el índice completo de la A a la Z, filtra por categoría o busca un nombre.