robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Alat ini berjalan langsung di browser dan siap untuk pemeriksaan cepat tanpa menginstal perangkat lunak.
Input dapat segera dihapus dan dihitung ulang, yang berguna untuk tugas-tugas kecil yang berulang.
Gunakan mode layar penuh saat Anda memerlukan lebih banyak ruang untuk teks panjang, data terstruktur, atau blok hasil besar.
Tombol salin tersedia pada keluaran yang dihasilkan sehingga hasilnya dapat digunakan kembali dalam kode, dokumen, atau obrolan dukungan.
Sebagian besar operasi bersifat deterministik: masukan dan opsi yang sama menghasilkan keluaran yang sama.
Untuk konten sensitif, pilih alat browser lokal dan tinjau hasilnya sebelum membagikannya lebih lanjut.