
Anthropic informó que Claude generó pruebas matemáticas de la corrección del código existente para 123 bibliotecas de código abierto. El volumen de código de prueba creado fue de aproximadamente 180 millones de líneas.
Durante el trabajo, el modelo detectó errores que, según The Decoder, no fueron identificados por años de pruebas. Anthropic busca hacer de la verificación formal con IA una práctica tan común como las pruebas estándares.
El valor práctico depende de cuánto se verifiquen de forma independiente estos resultados y de cuán aplicable sea el enfoque a otros proyectos. En el paquete presentado solo hay un sinopsis de la publicación, y no su texto completo ni pruebas aisladas.
comentario editorial
Por qué importa
Conjetura probable: un incremento del interés en herramientas de IA para la verificación formal de código, si los resultados se confirman. La siguiente señal observable será una evaluación independiente de las pruebas y la reacción de los desarrolladores de las bibliotecas. Una gran incertidumbre se debe a la ausencia de materiales primarios en el paquete y a los detalles sobre los errores detectados.