OpenZeppelin dice que el conjunto de datos de EVMbench contiene filtraciones de datos de entrenamiento
OpenZeppelin encontró contaminación de datos y fallas metodológicas en el punto de referencia de seguridad blockchain EVMbench de OpenAI.Resumen
La firma de seguridad blockchain OpenZeppelin auditó EVMbench, el punto de referencia de seguridad de contratos inteligentes de OpenAI desarrollado en asociación con Paradigm, e identificó problemas significativos. La principal preocupación es la contaminación de los datos de entrenamiento, ya que es probable que los agentes de IA con las puntuaciones más altas hayan estado expuestos a los informes de vulnerabilidades del punto de referencia durante el preentrenamiento, dado que el conjunto de datos se basa en auditorías hasta mediados de 2025. Además, OpenZeppelin señaló fallas metodológicas, incluida la clasificación errónea de al menos cuatro vulnerabilidades no explotables como de alta severidad. Si bien OpenZeppelin reconoce el futuro papel de la IA en la seguridad blockchain, enfatizó la necesidad de datos y puntos de referencia rigurosos y libres de contaminación para evaluar correctamente estas herramientas.
(Fuente：Cointelegraph)