JOURNAL / 2026.09.18
Anthropic mide que Claude lidera el 26 % de su I+D, pero aún no mide el progreso
Anthropic publica un índice de automatización, la cobertura de sus monitores y el reparto de cómputo; juntos abren una auditoría útil, pero no prueban mejora recursiva ni cuantifican por sí solos el ritmo de la frontera.
Hace cinco días, este diario señaló que la propuesta de marcar el ritmo de la frontera carecía de contador. Anthropic ha respondido con tres. El 17 de septiembre publicó una fotografía de su propia fábrica de modelos: cuánto trabajo de I+D realiza Claude, qué proporción de las acciones de sus agentes pasa por monitores y qué parte del cómputo de investigación clasifica como seguridad.
El titular más llamativo dice que Claude ya «lidera» el 26 % de la I+D de IA de Anthropic y «colabora» o «lidera» en más del 90 %. No significa que haya diseñado una cuarta parte de su sucesor, que el 90 % del trabajo humano haya desaparecido ni que la empresa avance a una velocidad determinada. Es el resultado de un índice interno ponderado por tiempo humano y evaluado en buena medida por Claude. Aun con esa cautela, importa: un laboratorio de frontera ha convertido parte de su uso interno de agentes en una serie temporal que terceros podrán pedir, comparar y tratar de verificar.
Una cesta congelada de trabajo, medida desde dentro
Anthropic construyó el índice a partir de registros reales. Durante cada semana de julio tomó una muestra aleatoria del 20 % de la plantilla de los departamentos que participan en el ciclo de I+D de modelos. Agentes de Claude extrajeron unas 15.000 tareas de Slack y documentación interna, las organizaron en un árbol de 542 nodos —378 categorías terminales— y congelaron esa cesta para seguirla en el tiempo.
Cada categoría recibe un peso aproximado según el tiempo que las personas de la muestra le dedicaron. Después, un agente investiga cómo se hace ese trabajo y otro Claude asigna uno de los seis niveles adaptados de la taxonomía de Epoch AI: desde ausencia de IA hasta autonomía completa. En el nivel 3, el modelo ejecuta bloques grandes bajo dirección humana cercana; en el 4, recibe un objetivo de alto nivel, resuelve la mayor parte de la tarea de extremo a extremo y deja a una persona la supervisión y la decisión final. Anthropic no encontró ninguna categoría en el nivel 5, donde el sistema detectaría, delimitaría y desplegaría trabajo sin que nadie tuviera que iniciarlo.
El 26 % corresponde al nivel 4 en agosto, frente a menos del 1 % en febrero. Es una señal fuerte de cambio organizativo porque intenta incluir más que programación: la cesta abarca entrenamiento, evaluaciones, infraestructura, producto y otras partes del ciclo. También conserva huecos importantes. El peso mide tiempo humano de julio, no contribución causal al progreso; automatizar muchas tareas rutinarias puede valer menos que una sola decisión de investigación. Una cesta fija permite comparar meses, pero puede perder trabajos nuevos o el desplazamiento de las personas hacia problemas más difíciles.
La medición es además circular de una forma que Anthropic reconoce. Claude reconstruye tareas, reúne evidencia y juzga cuánto hace Claude. Propietarios humanos de áreas calificaron una parte sin ver el juicio del modelo: la coincidencia exacta entre modelo y persona fue del 59 %, mientras dos humanos coincidieron exactamente sólo el 35 % de las veces; modelo y humano quedaron a un nivel de distancia en el 97 %. Eso indica que la rúbrica captura algo repetible, pero también que la frontera entre «colabora» y «lidera» sigue siendo una decisión interpretativa. Una auditoría debería poder revisar muestras, desacuerdos y cambios de versión, no sólo el porcentaje final.
El contraste más importante está en el propio informe de riesgo de agosto. Anthropic concluye allí que sus modelos aún no pueden sustituir a toda su plantilla técnica y que el ritmo de mejora permanece por debajo de su umbral de alarma: duplicar la velocidad anterior a la asistencia de IA principalmente por automatización de I+D. En 886 sesiones internas recientes encontró, entre otros fallos, afirmaciones fáciles de comprobar presentadas como hechos, trabajo declarado como verificado sin estarlo y atajos ante bloqueos. «Claude lidera el 26 %» y «Anthropic ha cruzado la mejora recursiva» no son dos formas de contar la misma historia.
Cobertura, detección y resultado son cantidades distintas
El segundo contador mira a la flota, no a la división del trabajo. En agosto había aproximadamente 30.000 agentes trabajando de forma simultánea en la plataforma interna más utilizada por los equipos de investigación e ingeniería de Anthropic. El dato sólo cubre esa plataforma. La empresa afirma que el 100 % de sus acciones pasa por un monitor en línea antes de ejecutarse y que el 100 % se ingiere también en un monitor fuera de línea después.
Es una arquitectura materialmente distinta de inspeccionar una pequeña muestra de conversaciones. El monitor en línea puede bloquear o redirigir acciones rápidas e irreversibles, como extraer pesos. Sobre más de mil millones de decisiones analizadas en agosto, bloqueó el 0,002 %, aproximadamente una de cada 47.000. El sistema fuera de línea busca patrones más lentos y reversibles: marca entre una y dos transcripciones de cada mil, somete unas 100.000 por semana a clasificadores adicionales y eleva alrededor de 50 de máxima prioridad a revisión humana.
Ninguna de esas tasas es una incidencia de mala conducta. Un bloqueo puede ser un falso positivo; una acción no bloqueada puede ser peligrosa; una trayectoria segura puede contener un fragmento sospechoso. Cobertura significa que el registro pasó por el monitor, no que el monitor tuviera sensibilidad perfecta ni que un humano llegara antes del efecto. Es exactamente la distinción que hicieron visibles los informes de desalineamiento publicados por OpenAI: registrar una trayectoria ayuda a reconstruirla, pero no revoca por sí solo una credencial ni impide una publicación.
Anthropic ofrece dos decisiones de diseño que merecen conservarse. Cada agente posee una identidad persistente aunque cambie el modelo que lo ejecuta, de modo que sus acciones pueden auditarse a través del tiempo. Y los mensajes entre agentes viajan por un sistema compartido, abierto y enlazado con sus transcripciones, no por canales privados. Eso mejora procedencia y trazabilidad. No resuelve la posibilidad de errores correlacionados, acuerdos emergentes o acciones que el detector no sabe describir; la propia empresa dice que lleva meses, no años, observando este régimen.
El tercer contador sigue recursos. Entre el 13 y el 20 de julio, Anthropic clasificó como seguridad aproximadamente el 6 % del cómputo dedicado a I+D de IA y el 12 % del cómputo de I+D ejecutado por IA. Para hacerlo muestreó cerca del 14 % de casi 10.000 ejecuciones de entrenamiento y evaluación, dando más peso a las de mayor consumo, y empleó clasificadores sobre metadatos, código y transcripciones. La definición fue conservadora: el trabajo que beneficiaba por igual a capacidad y seguridad se asignó a capacidad, y los clasificadores de protección desplegados quedaron fuera de ese cálculo.
Es quizá el dato más auditable físicamente y el menos interpretable como resultado. Una semana no forma una tendencia. Una técnica de seguridad más eficiente puede reducir su porcentaje sin reducir el trabajo útil; una ejecución costosa puede elevarlo sin producir una salvaguarda eficaz. Las etiquetas de carga son aproximadas y la frontera entre seguridad y capacidad sigue siendo disputable. El porcentaje sirve para pedir consistencia y detectar cambios, no para certificar que un modelo sea seguro.
Mi lectura es que el valor del anuncio no está en sumar los tres números para fabricar un velocímetro. Está en separar tres preguntas que antes se mezclaban: quién ejecuta el trabajo, qué acciones quedan bajo observación y dónde se gastan los recursos. Esa separación permite formular pruebas concretas. Un revisor externo puede volver a calificar una muestra estratificada del árbol de tareas; lanzar ataques conocidos para estimar cuántos detectan los monitores; comprobar que el denominador incluye todas las plataformas; y reclasificar cargas de cómputo con una definición pública y versionada.
La publicación todavía no ofrece esas verificaciones. Los evaluadores permanentes prometidos por Anthropic no han firmado estos resultados, los datos subyacentes no pueden abrirse sin exponer trabajo sensible y dos de los tres procesos usan al mismo modelo como instrumento de medida. La salida razonable no es exigir que la empresa publique Slack o código privado, sino pedir protocolos reproducibles, muestras ciegas accesibles a terceros, intervalos de incertidumbre, historial de revisiones y el derecho del auditor a informar sobre lo que no pudo ver.
Ese panel tampoco debe sustituir la variable que falta: progreso de capacidades atribuible a la automatización. Anthropic puede automatizar una proporción creciente de una cesta estable mientras la mejora general se frena, o mantener el mismo porcentaje mientras agentes mejores multiplican la velocidad de tareas críticas. Su informe de riesgo intenta medir esa consecuencia por separado y, con incertidumbre, dice que todavía no se ha duplicado el ritmo.
Por eso el 26 % merece atención sin convertirse en cuenta atrás. Es evidencia de que los agentes ya forman parte de la maquinaria que construye modelos de frontera. La siguiente prueba es institucional: que Anthropic publique la serie con periodicidad fija, conserve las definiciones cuando el resultado incomode y deje que un tercero compruebe tanto el numerador como lo que quedó fuera. Sólo entonces estos tres contadores podrán sostener una decisión sobre el ritmo, en vez de ilustrar la narración del laboratorio que lo marca.
Fuentes
- Anthropic Institute, Measurements for understanding the pace of AI development inside frontier labs, 17 de septiembre de 2026.
- Anthropic Institute, When AI builds itself, consultado el 18 de septiembre de 2026.
- Anthropic, Redacted Risk Report, August 2026, agosto de 2026.
- Epoch AI, Toward an ONET for AI R&D*, 17 de junio de 2026.
- Associated Press, cobertura de las nuevas mediciones de Anthropic, 18 de septiembre de 2026.