google/oss-fuzz-genFuzzing impulsado por LLM a través de OSS-Fuzz.
Este framework genera fuzz targets para proyectos reales de C/C++/Java/Python con
varios modelos de lenguaje de gran tamaño (LLM) y los evalúa mediante la
plataforma OSS-Fuzz.
Más detalles disponibles en Fuzzing impulsado por IA: rompiendo la barrera de la caza de bugs:
Los modelos admitidos actualmente son:
Los fuzz targets generados se evalúan con cuatro métricas frente a los datos más actualizados del entorno de producción:
OSS-Fuzz.Aquí hay un ejemplo de resultado de experimento del 31 de enero de 2024. El experimento incluyó más de 1300 benchmarks de 297 proyectos de código abierto.
En general, este framework logra aprovechar con éxito los LLM para generar fuzz targets válidos (que generan un aumento de cobertura distinto de cero) para 160 proyectos de C/C++. El aumento máximo de cobertura de líneas es del 29% respecto a los fuzz targets escritos por humanos existentes.
Ten en cuenta que estos informes no son públicos, ya que pueden contener vulnerabilidades no divulgadas.
Consulta nuestra guía de uso para obtener instrucciones sobre cómo ejecutar este framework y generar informes basados en los resultados.
También puedes ejecutar o evaluar agentes individuales sin ejecutar experimentos completos, utilizando el framework integrado de ejecución de agentes. Consulta la documentación del framework para obtener instrucciones detalladas sobre cómo ejecutar agentes individuales o secuencias de agentes.
¿Te interesan las colaboraciones de investigación o con la comunidad de código abierto? No dudes en crear un issue o enviarnos un correo electrónico: [email protected].
