robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

La herramienta se ejecuta directamente en el navegador y está lista para realizar comprobaciones rápidas sin instalar software.
La entrada se puede borrar y recalcular inmediatamente, lo que resulta útil para tareas pequeñas repetidas.
Utilice el modo de pantalla completa cuando necesite más espacio para texto largo, datos estructurados o bloques de resultados grandes.
Los botones de copia están disponibles en los resultados generados para que los resultados se puedan reutilizar en código, documentos o chats de soporte.
La mayoría de las operaciones son deterministas: los mismos insumos y opciones producen el mismo resultado.
Para contenido confidencial, prefiera las herramientas del navegador local y revise el resultado antes de compartirlo más.