El código generado por IA contiene 15 vulnerabilidades por base de código,
en promedio

Un punto de referencia dinámico que mide la frecuencia con la que los principales modelos de IA generan código con vulnerabilidades de seguridad. Su metodología fue desarrollada originalmente junto con la RMIT University y, desde entonces, Secure Code Warrior la ha ampliado de forma independiente a 16 modelos. Se actualiza a medida que aparecen nuevos modelos, en lugar de publicarse como un estudio único.

Un promedio de 15 vulnerabilidades confirmadas por base de código en las 1760 bases de código analizadas, de las cuales 4 o más suelen clasificarse como de gravedad crítica o alta.

Ningún modelo destaca en todos los contextos. Claude Sonnet 5 obtuvo la puntuación global más alta con 80,4 sobre 100, pero el modelo líder varía según el framework.

No. De los 16 modelos analizados, el más caro (Claude Fable 5, 174,94 $ por ejecución) ocupa el segundo lugar, mientras que el más barato (Gemini 2.5 Flash, 0,58 $ por ejecución) obtiene una puntuación inferior a la media.

CWE-532 —escribir información confidencial, como contraseñas o tokens, en los archivos de registro de la aplicación— apareció 8.543 veces, más que cualquier otra vulnerabilidad en el conjunto de datos.

Dieciséis modelos de IA generaron la misma aplicación en 11 marcos de trabajo, 10 veces cada uno, analizados con las mismas herramientas y el mismo proceso de verificación en cada ocasión.