Skip to content
KitploitKITPLOIT
StrumentiExploitsBlog
Log in
Invia
StrumentiExploitsBlog
Invia

Strumenti di Hacking, PenTest e Cybersecurity per il tuo Arsenale di Sicurezza!

Kitploit è una directory di strumenti di hacking, cybersecurity e pentesting. Scopri gli ultimi aggiornamenti dei progetti per trovare vulnerabilità, analizzare sistemi, automatizzare i test e rafforzare la tua sicurezza.

FeedContattoPrivacy© 2026 Kitploit

Directory degli strumenti

Categorie

Vedi tutte le categorie
Loading categories
BenchProctor — Corpus di benchmark SAST aperto: 2.938.418 casi bilanciati, 11 linguaggi, 21 target di framework, 242 categorie emesse e 231 ID CWE distinti. Valuta l'output SARIF 2.1.0 con TPR, FPR e J di Youden. | Kitploit
Strumenti/GitHubGitHub/theauditortool/benchproctor
Analisi StaticaScanner di Vulnerabilità WebAnalisi delle VulnerabilitàAnalisi del CodiceApprendimento e Formazione
GitHubtheauditortool/benchproctor

BenchProctor

Corpus di benchmark SAST aperto: 2.938.418 casi bilanciati, 11 linguaggi, 21 target di framework, 242 categorie emesse e 231 ID CWE distinti. Valuta l'output SARIF 2.1.0 con TPR, FPR e J di Youden.

Vedi RepositorySito web
1331 giorno faNon ancora revisionato
Condividi

BenchProctor

Ground truth per SAST. Un benchmark aperto con ground truth leggibile dalla macchina e scorer SARIF deterministici, per misurare con quanta accuratezza uno strumento di analisi statica identifica le vulnerabilità reali nel codice del benchmark e con quale frequenza segnala codice sicuro.

benchproctor.com · blog · Apache-2.0

Stato della release

La release 2026.11.16 è la release corrente. È una release curata:

  • 2.142 casi autonomi in 11 linguaggi su 21 framework target, esattamente 1.071 vulnerabili e 1.071 sicuri;
  • 60 applicazioni multi-servizio in cinque linguaggi, contenenti 860 flussi etichettati.

Le release riprendono in questa forma curata. Ogni release è un piccolo campione nuovo: solo difficoltà facile e media, su un elenco fisso di framework e classi di debolezza. Il corpus più ampio da cui è estratto non è pubblicato. Vedi Cosa non contiene questa release.

La release 2026.07.22 è ritirata. Un audit ha rilevato difetti nelle etichette e nel realismo nelle famiglie da cui era stata costruita. Non riportare punteggi riferiti a essa. Vedi Correzioni e contestazioni sul ground truth.

Uno strumento SAST è affidabile solo quanto la sua performance misurata, e misurare tale performance richiede un ground truth. BenchProctor fornisce casi etichettati vulnerable o safe, così puoi valutare output SARIF 2.1.0 compatibili e calcolarne il tasso di veri positivi, il tasso di falsi positivi e la J di Youden.

Avvio rapido

# 1. extract one language bundle
unzip Benchmarks/standalone/benchproctor-java-2026.11.16.zip -d benchproctor-java

# 2. scan one framework's testcode and export SARIF 2.1.0
your-tool scan ./benchproctor-java/spring/testcode --format sarif -o results.sarif

# 3. score against its answer key (standard-library Python, zero dependencies)
python ./benchproctor-java/score_sarif.py results.sarif \
  ./benchproctor-java/spring/expectedresults-2026.11.16.csv

# 4. read category-averaged and flat-aggregate TPR, FPR, and Youden's J

Lo scorer recupera il CWE di ogni finding dal ruleId del SARIF, dalle properties o dai tags del risultato o della regola (ad esempio external/cwe/cwe-089), oppure dai taxa CWE. Questo supporta molte codifiche SARIF comuni senza configurazione. Se il tuo strumento non emette alcun CWE, aggiungi --match-mode filename (qualsiasi finding su un file vulnerabile conta; questo premia il sovra-segnalare, quindi preferisci il default). Lo stesso score_sarif.py è incluso in ogni bundle standalone. Le applicazioni hanno il proprio scorer; vedi Applications.

Perché un altro benchmark

Molti benchmark SAST pubblici esistenti presentano una o più di queste limitazioni strutturali:

  • Casi fissi e immutabili. Un insieme statico di casi scritti da esseri umani può incoraggiare nel tempo un tuning specifico per il benchmark, rendendo i risultati meno indicativi della generalizzazione a codice non visto.
  • Etichette codificate nei nomi dei file. Quando un test si trova in sqli/Test01729_true_positive.java, uno scanner può ottenere un buon punteggio confrontando il percorso anziché analizzare il codice.
  • Copertura strutturale limitata. Molte suite si concentrano su un solo linguaggio e su finding in singoli file, senza testare un flusso che attraversa un confine di servizio.

BenchProctor riduce per costruzione la memorizzazione di casi esatti e la fuga di etichette, copre 11 linguaggi e aggiunge applicazioni multi-servizio i cui flussi attraversano un confine di processo.

Cosa contiene questa release

Release2026.11.16
Casi standalone2.142: 1.071 vulnerabili e 1.071 sicuri
Linguaggi11: Java, Python, Go, Rust, TypeScript, JavaScript, PHP, Ruby, Bash, C, C++
Target di framework21 (vedi la tabella sottostante)
Classi di debolezza22, mappate su 22 ID CWE distinti
Campionamento3 casi vulnerabili + 3 casi sicuri per ogni coppia framework e classe: 357 coppie
Applicazioni60 applicazioni a due servizi su 4 grafi di servizi, in TypeScript, JavaScript, Python, Java e C++
Flussi delle applicazioni860 flussi etichettati: 234 vulnerabili e 626 sicuri
Difficoltàfacile e media

Ogni coppia framework e classe è bilanciata esattamente. Secondo la J di Youden, uno strumento che segnala tutto ottiene 0 perché i suoi tassi di veri positivi e falsi positivi sono entrambi al 100%. Alcuni casi utilizzano file runtime condivisi o companion richiesti dal loro linguaggio o framework; questi file non sono valutati separatamente.

Cosa non contiene questa release

Questa è una release curata ed è deliberatamente ristretta. Non contiene:

  • Casi costruiti attorno a una salvaguardia inefficace. In questa release un caso vulnerabile non ha alcuna salvaguardia, e un caso sicuro ne ha una che funziona. Uno strumento che considera la presenza di qualsiasi salvaguardia come prova di sicurezza non viene penalizzato qui.
  • I pattern di propagazione più profondi. I flussi utilizzano solo propagazione diretta e a profondità media.
  • Framework, classi di debolezza e forme di applicazione al di fuori delle liste in questa pagina.

Leggi un punteggio su questa release come una verifica del livello minimo su classi ampiamente note, non come una valutazione completa.

Come è costruito

  • Combinatorio, non scritto a mano. Ogni classe modella un comportamento rilevante per la sicurezza utilizzando i componenti applicabili di quattro assi: dove entra l'input non attendibile (source), come viaggia (propagator), cosa lo neutralizzerebbe (sanitizer o safeguard) e l'operazione pericolosa che raggiunge (sink). Un caso vulnerabile omette la salvaguardia; la sua controparte sicura ne applica una efficace. Ogni caso emesso è vincolato a un percorso valido e analizzabile utilizzando API reali del linguaggio e del framework.
  • Sintetico per progettazione. Il corpus isola intenzionalmente le proprietà di sicurezza rilevanti per la valutazione. I singoli casi utilizzano API reali ma non sono pensati per rappresentare funzionalità di produzione complete.
  • Anti-fuga per costruzione. I file emessi non contengono commenti, tag CWE, nomi di categorie o identificatori che portano etichette. Gli ID dei file sono mescolati, quindi i nomi dei file non codificano la classe o l'etichetta di un caso. I file CSV delle chiavi di risposta sono l'unica fonte pubblicata di etichette.
  • Rotazione del seed. Ogni rilascio è generato con il proprio seed. Un nuovo rilascio mantiene gli stessi linguaggi, framework, classi, campionamento e difficoltà, ed emette combinazioni e identificatori diversi. Questo limita l'utilità della memorizzazione di file esatti e nomi di file ed è progettato per supportare la comparabilità dei punteggi tra rilasci. La generalizzazione strutturale tra rilasci resta possibile e attesa.

Linguaggi e framework

LinguaggioFramework targetTargetClassi per targetCasi
JavaSpring, Jakarta EE218216
PythonFlask, Django, FastAPI318324
GoGin, net/http215180
RustActix-web, Axum215180
TypeScriptNestJS, Express218216
JavaScriptExpress, Koa218216
PHPLaravel, Symfony218216
RubyRails, Sinatra217204
C++cpp-httplib, standalone219228
Cstandalone11696
Bashstandalone11166
Totale2122 in unione2,142

Un framework target contiene le classi che si verificano nel suo linguaggio. C e C++ includono classi di sicurezza della memoria; i linguaggi gestiti no.

Scarica lo strumento

Più Popolari

Vedi tutti →

Scopri gli strumenti più utilizzati dalla nostra community.

  • 1

    OsintHunter

    letox4/osinthunter

    🎯 Il toolkit OSINT definitivo: grafo di indagine, punteggio di affidabilità, famiglie di alias, mappa, timeline e report. 49 moduli, oltre 400 siti, nessuna chiave API richiesta.

    491
  • 2

    ghostlock-app

    yukonga/ghostlock-app

    # App di esecuzione con un tocco GhostLock (CVE-2026-43499)

    462
  • 3

    opencti

    opencti-platform/opencti

    Piattaforma aperta di intelligence sulle minacce informatiche

    345
  • 4

    ARTEX

    baarai/artex

    Piattaforma di penetration testing autonoma multi-agente basata su LLM con agenti planner/worker, grafi di asset e di esplorazione, registrazione del traffico MITM e retesting delle vulnerabilità.

    340
  • 5

    redforge

    cybersecurity91/redforge

    Toolkit red team lato browser con 102 strumenti offline per ricognizione, generazione di payload, attacchi alle credenziali, crittografia, codifica e reportistica dell'engagement.

    306
  • 6

    estorides

    grisuno/estorides

    Aggrega in parallelo oltre 99 fonti OSINT gratuite, risolve le entità in un knowledge graph ed esporta in STIX 2.1, MISP o GraphML con analisi assistita da LLM.

    292

Esplora tutti gli strumenti

Sfoglia la nostra collezione di strumenti

Vedi tutti gli strumenti →