robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Nástroj běží přímo v prohlížeči a je připraven na rychlé kontroly bez instalace softwaru.
Vstup lze okamžitě vymazat a přepočítat, což je užitečné pro opakované malé úkoly.
Režim celé obrazovky použijte, když potřebujete více místa pro dlouhý text, strukturovaná data nebo velké bloky výsledků.
Na generovaném výstupu jsou k dispozici tlačítka pro kopírování, takže výsledky lze znovu použít v kódu, dokumentech nebo podpůrných chatech.
Většina operací je deterministická: stejný vstup a volby vytvářejí stejný výstup.
U citlivého obsahu upřednostněte nástroje místního prohlížeče a před dalším sdílením si výsledek prohlédněte.