google/fuzzbenchFuzzBench — сервис для бенчмаркинга фаззеров.
FuzzBench — это бесплатный сервис, который оценивает фаззеры на множестве реальных бенчмарков в масштабе Google. Цель FuzzBench — упростить строгую оценку исследований фаззинга и сделать их более доступными для сообщества. Мы приглашаем исследователей внести свои фаззеры и поделиться отзывами для улучшения методов оценки.
FuzzBench предоставляет:
Чтобы принять участие, отправьте свой фаззер для запуска на платформе FuzzBench, следуя нашему простому руководству. После принятия интеграции мы проведём масштабный эксперимент с вашим фаззером и сгенерируем отчёт, сравнивающий его с другими. Смотрите пример отчёта.
Вы можете просмотреть наш пример отчёта здесь и периодически генерируемые отчёты здесь. Пример отчёта создан с использованием 10 фаззеров против 24 реальных бенчмарков, по 20 прогонов каждый, в течение 24 часов. Сырые данные в сжатом CSV-формате можно найти в конце отчёта.
При анализе отчётов мы рекомендуем:
Пожалуйста, сообщайте о любых неточностях и возможных улучшениях (например, изменениях в интеграции, новых бенчмарках и т.д.), открывая issue на GitHub здесь.
Прочитайте нашу подробную документацию, чтобы узнать, как использовать FuzzBench.
Присоединяйтесь к нашему списку рассылки для обсуждений и анонсов или отправьте нам личное письмо на [email protected].
