robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

L'eina s'executa directament al navegador i està preparada per a comprovacions ràpides sense instal·lar programari.
L'entrada es pot esborrar i tornar a calcular immediatament, cosa que és útil per a tasques petites repetides.
Utilitzeu el mode de pantalla completa quan necessiteu més espai per a text llarg, dades estructurades o blocs de resultats grans.
Els botons de còpia estan disponibles a la sortida generada perquè els resultats es puguin reutilitzar en codi, documents o xats d'assistència.
La majoria de les operacions són deterministes: la mateixa entrada i opcions produeixen la mateixa sortida.
Per al contingut sensible, preferiu les eines del navegador local i reviseu el resultat abans de compartir-lo més.