Robots.txt Tester

Verifica se un determinato user‑agent (es. Googlebot) può accedere a una pagina, analizzando le regole presenti nel file robots.txt. Utile per capire esclusioni dall’indicizzazione prima di andare online.

Come usarlo: Specifica l’URL da testare e l'user‑agent. Il tool mostrerà la regola (Allow/Disallow) che si applica e il motivo dell’esito.

Potremmo comparire nei log dei siti target; evita URL interni o con credenziali.