La Fundación Ethereum dijo que los agentes de IA son buenos para encontrar vulnerabilidades en la infraestructura de la red, pero la mayoría son falsos positivos, según una publicación de blog del jueves.

«Que los agentes encontraran errores no fue la sorpresa. La sorpresa fue lo poco de trabajo que se dedicó a encontrarlos, y cuánto a diferenciar los errores reales de los que solo parecían reales», dijo la EF.

El equipo de Seguridad de Protocolos de la EF ha estado utilizando agentes de IA coordinados para probar la infraestructura crítica de la red, incluyendo software de sistemas, código criptográfico y contratos inteligentes. Los agentes han encontrado errores reales, incluyendo «un pánico activable de forma remota en gossipsub de libp2p, una parte central de la capa peer-to-peer sobre la que se ejecutan los clientes de consenso de Ethereum», que ya ha sido corregido y divulgado públicamente.

Aunque la fundación dijo que los agentes de IA pueden identificar rápidamente posibles vulnerabilidades, la tecnología ha creado simultáneamente una mayor carga de trabajo para los investigadores humanos, quienes deben evaluar un número creciente de posibles errores, o «candidatos».

«La mayoría de los candidatos son incorrectos, duplicados o están fuera de alcance. Eso no es un problema con el método; así es como funciona», escribió la EF. «El objetivo es rechazar rápidamente los incorrectos y respaldar los reales con pruebas difíciles de refutar».

Una vulnerabilidad potencial no se considera un hallazgo real hasta que los investigadores pueden reproducir de forma independiente el fallo en el código real. La fundación también señaló que los agentes de IA pueden tener dificultades para identificar errores que surgen a lo largo de una secuencia.

En otras palabras, algunos de los principales investigadores de seguridad de Ethereum consideran que la IA es una herramienta de búsqueda potente, pero no un oráculo, por así decirlo.

«El tiempo que antes se dedicaba a idear y perseguir hipótesis ahora se dedica a juzgarlas a escala, incluyendo la construcción del oráculo, la ejecución del triaje, el mantenimiento de la lista de problemas conocidos y la gestión de la divulgación», dijeron. «El cuello de botella no desapareció. Se trasladó de encontrar errores a confiar en los resultados, lo cual es un lugar mejor para ello, porque ahí es donde el juicio humano realmente importa».

La publicación del blog del jueves se produce tras la reciente reorganización de la EF, que resultó en una nueva estructura operativa y la fundación redujo el 20% de su fuerza laboral total.