Skip to content
XSCRIPTOR/DEV~$ _
~/resources/web/xwa/shinobi/
├──Un web scraper stealth con un'unica interfaccia web. Scarica siti completi — HTML, CSS, JS, immagini, PDF — mentre evade il rilevamento attraverso molteplici strati anti-blocco: rotazione user-agent, randomizzazione header, ritardo con jitter, backoff esponenziale e supporto proxy.
├──Anti-BlockingUA rotation, header randomize
├──Deep CrawlBFS recursive with depth
├──JS RenderingHeadless Chromium
├──Asset DownloadHTML/CSS/JS/images/PDF
├──Proxy RotationHTTP/HTTPS/SOCKS5
└──Fast ModePure Rust — zero deps