Pencari Sitemap XML & Ekstraktor URL
Cara memakai pencari sitemap XML
Kembali ke alatMasukkan satu domain; yang keluar adalah setiap berkas sitemap yang situs itu deklarasikan, beserta URL di dalam berkas mana pun yang Anda buka.
- 01
Masukkan domain atau alamat sitemap
Domain adalah jalan masuk yang biasa: kami membaca robots.txt, lalu lokasi standar di akar host. Tempelkan alamat yang berakhiran .xml atau .xml.gz maka file itulah yang menjadi akar pohon, berguna saat sitemap berada di tempat yang tak pernah disebut robots.txt. Path halaman biasa diabaikan; hanya host-nya yang dipakai.
- 02
Baca pohon berkas
Pemindaian membaca robots.txt lalu mengunduh berkas yang disebut di sana — tingkat teratas, dan hanya itu. Berkas yang dideklarasikan sebuah indeks sitemap didaftar langsung dari isi indeksnya, lengkap dengan alamat dan Terakhir diubah, tetapi belum ada yang diunduh untuk mereka — itulah gunanya tombol Periksa di barisnya. Sepuluh permintaan sudah menjawab pertanyaan yang dibawa kebanyakan orang ke sini.
- 03
Periksa sebuah file untuk membaca isinya
Periksa mengambil satu file itu saja: satu klik, satu permintaan. Set URL membuka URL halamannya beserta tanggal Terakhir diubah. Indeks menambahkan anak-anaknya ke pohon sebagai baris baru. File yang tak terbaca menyebut alasannya, dan tombolnya menjadi Coba lagi. Periksa semua menjalankan pemeriksaan yang sama pada setiap baris yang menunggu dan berhenti begitu batas laju menjawab.
- 04
Ekspor daftar
Salin tabel dan Ekspor CSV mengambil tabel apa adanya: setiap baris file, plus URL halaman dari file mana pun yang Anda buka. Lima kolom membawa pohon ke lembar kerja: Tingkat menyatakan apakah baris adalah sitemap atau URL halaman; lalu alamat; lalu Sitemap induk, file yang mendeklarasikannya; lalu Terakhir diubah; lalu Hasil, bagaimana file itu sendiri menjawab — kosong pada baris halaman, yang tidak pernah diambil alat ini.
Cara membaca laporan pohon sitemap
Setiap baris adalah satu file sitemap, atau satu URL halaman di dalamnya. Baris diam selama tidak ada yang salah, jadi apa pun yang tertulis di samping alamat layak dibaca. Batas atas diumumkan di tabel, tidak pernah diterapkan diam-diam: seratus file per pemindaian, tiga ratus baris, 5.000 URL ditampilkan per file, 10 MB per file.
Catatan status baris
- Tanpa catatan, di sebelah Periksa
- Belum diambil. Sebuah indeks mendeklarasikan file ini, tetapi pemindaian sengaja berhenti di tingkat teratas: mengambil setiap anak dari setiap indeks memakan satu permintaan per file dan menjawab pertanyaan yang mungkin tak Anda ajukan.
- Tanpa catatan, di sebelah Lihat
- Berkas terbaca dan tidak ada yang salah. Tekan Lihat untuk melihat isinya: URL halaman kalau ia urlset, atau baris anak baru kalau ternyata ia indeks lagi.
- 404, 503, Timeout
- Berkas tidak terbaca. Berkas yang dideklarasikan sebuah indeks tetapi tidak disajikan situsnya adalah temuan nyata — mesin pencari menerima jawaban yang sama dengan Anda. Tombolnya berubah jadi Coba lagi, yang bertanya ulang.
- Bukan sitemap (html)
- Server menjawab 200 tetapi mengirim halaman web. Biasanya soft 404, kadang halaman pemblokiran. Layak diperbaiki bagaimanapun — dari peramban tampak baik-baik saja.
- Lebih dari 10 MB — tidak dibaca
- Melewati batas ukuran kami, diukur setelah dekompresi. Kami tidak mengurai sesuatu yang hanya terbaca separuh: berkas XML yang terpotong adalah berkas XML yang rusak, dan daftar URL yang tidak lengkap tetapi tampak lengkap lebih buruk daripada tidak ada.
Kolom pohon
- Indeks Lv1, Sitemap Lv2, URL
- Kolom Tingkat memuat pohonnya: indentasi, panah ↳ untuk file yang dideklarasikan baris di atasnya, dan tingkatnya. Indeks mencantumkan sitemap lain; Sitemap adalah file yang belum dibaca; URL adalah halaman di dalam file di atasnya.
- Tanggal di Terakhir diubah
- Nilai lastmod yang dideklarasikan indeks induk untuk file ini. Membacanya tak berbiaya dan sering menjadi alasan Anda di sini: ia menyatakan cabang situs mana yang baru berubah. Itu klaim situs sendiri, bukan pengukuran.
- Tanda hubung di Terakhir diubah
- Tidak ada yang mendeklarasikan tanggal untuk berkas ini. Berkas tingkat teratas biasanya begini — tidak ada apa pun di atasnya yang mendeklarasikan sesuatu tentangnya. Ini tidak mengatakan apakah berkasnya usang.
- Baris tanpa tombol
- Sebuah indeks yang anak-anaknya sudah ada di pohon. Tidak ada lagi yang perlu diunduh untuknya; baca saja anak-anaknya.