Open SourceScraping14k
Katana
Un crawler veloce costruito per la security recon e la scoperta di URL.
Katana è un framework di web crawling veloce e scalabile di ProjectDiscovery, scritto in Go, progettato per una scoperta approfondita degli URL tramite crawling standard e headless con supporto JavaScript. Supporta controllo dello scope, compilazione di form, sorgenti passive ed estrazione di campi personalizzati con focus sulle pipeline di automazione. Si distingue nell'ambito della security e della recon per la sua velocità e la profondità di crawling configurabile.
Repository
projectdiscovery/katanaLinguaggio
GoCosa ci costruiresti
- Enumerare l'intera superficie URL di un sito prima dello scraping o dell'analisi
- Fare crawling di app JS-rendered per scoprire endpoint e asset nascosti
- Alimentare URL scoperti in pipeline automatizzate di dati o di sicurezza
Tag
crawlingrecongourl-discovery