Skip to content
XSCRIPTOR/DEV~$ _
~/resources/web/xwa/shinobi/
├──Un web scraper furtif avec une interface web unique. Télécharge des sites entiers — HTML, CSS, JS, images, PDF — tout en évitant la détection grâce à de multiples couches anti-blocage : rotation user-agent, randomisation des en-têtes, délai avec jitter, backoff exponentiel et support proxy.
├──Anti-BlockingUA rotation, header randomize
├──Deep CrawlBFS recursive with depth
├──JS RenderingHeadless Chromium
├──Asset DownloadHTML/CSS/JS/images/PDF
├──Proxy RotationHTTP/HTTPS/SOCKS5
└──Fast ModePure Rust — zero deps