02. MEDIR SISTEMAS DE IA
Lo que cuesta un agente por ejecución, qué hace que funcione, y por qué el mismo año produce tanto un 5% como un 88% de adopción de IA. Medido sobre sistemas en producción, incluidas las versiones que empeoraron.
03
La brecha de adopción
Veinte estadísticas muy citadas sobre IA, evaluadas según seis criterios. Por qué el mismo año da 5% y 88%, dónde están de verdad las empresas griegas una vez separados los tamaños, y por qué la explicación de la falta de perfiles no aguanta frente a los datos de gasto.
31 páginas,
61 afirmaciones,
10 archivos
Léela
PDF 0,9 MB
Datos
04
Qué hace funcionar de verdad un agent harness
Tres agent harness sobre un mismo modelo, 45 sesiones evaluadas. Incluye tres fallos encontrados en el propio instrumento de medida y dos resultados publicados retirados por ello.
31 páginas,
48 afirmaciones,
43 archivos
Léela
PDF 0,6 MB
Datos
05
Lo que cuesta de verdad un agente
Siete versiones de un agente en producción sobre un mismo banco de pruebas, incluidas las dos que empeoraron, y un control negativo que muestra que la suite saca un 22,8% sin hacer absolutamente nada.
27 páginas,
39 afirmaciones,
27 archivos
Léela
PDF 0,5 MB
Datos
08
Cuánto de un agente es el modelo
Seis harnesses de agente, cuatro modelos, once escenarios y un control que no hace nada. El modelo explica el 88 por ciento de la diferencia y el harness el 7, y dieciséis sesiones destruyeron archivos de usuario ante una instrucción vaga.
24 páginas,
49 afirmaciones,
122 archivos
Léela
PDF 0,4 MB
Datos
09
Qué se llevan los rastreadores de IA y qué devuelven
Dos sitios griegos, 58 días observados cada uno, medidos desde sus propios registros de acceso. Entre seiscientas y dos mil trescientas páginas tomadas por cada lector devuelto, en sitios que nunca bloquearon un rastreador.
20 páginas,
29 afirmaciones,
28 archivos
Léela
PDF 0,4 MB
Datos
12
El shell, no el sistema
El mismo modelo en Linux y en Windows. Setenta y seis comandos con la forma que un modelo escribe por defecto sobreviven al 97,4 por ciento bajo un shell POSIX y al 26,3 por ciento bajo el PowerShell que el agente recibe en realidad, en una misma máquina. La diferencia de sistema operativo no es detectable, y los seis comandos que sí cambia informan todos de éxito.
19 páginas,
82 afirmaciones,
37 archivos
Léela
PDF 0,4 MB
Datos