robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Nástroj beží priamo v prehliadači a je pripravený na rýchle kontroly bez inštalácie softvéru.
Vstup je možné okamžite vymazať a prepočítať, čo je užitočné pri opakovaných malých úlohách.
Režim celej obrazovky použite, keď potrebujete viac miesta pre dlhý text, štruktúrované dáta alebo veľké bloky výsledkov.
Tlačidlá kopírovania sú k dispozícii na vygenerovanom výstupe, takže výsledky možno opätovne použiť v kóde, dokumentoch alebo podporných rozhovoroch.
Väčšina operácií je deterministických: rovnaký vstup a možnosti vytvárajú rovnaký výstup.
V prípade citlivého obsahu uprednostňujte miestne nástroje prehliadača a pred ďalším zdieľaním skontrolujte výsledok.