cd ../strumenti
public cyber tool / webmasters / browser-side
Robots.txt Security Review
Robots.txt è pubblico e non protegge nulla. Questo tool aiuta a trovare segnali che possono rivelare percorsi sensibili o creare problemi SEO.
review --robots.txt
analisi locale / nessun fetch remoto
review --robots.txt
Regola fondamentale
Non usare robots.txt per nascondere aree private: chiunque può leggerlo.
Proteggi admin, backup, staging e file sensibili con autenticazione, permessi server e configurazione corretta.
Mantieni robots.txt semplice: indicazioni per crawler, sitemap e pochi blocchi realmente necessari.
riferimenti