Percuma untuk digunakan, tanpa akaun

Penguji robots.txt

Tampal teks robots.txt, masukkan token produk perangkak dan uji sehingga 100 URL. Keputusan dikira pada peranti ini; tiada apa yang diambil atau dimuat naik.

Tampal peraturan di sini. Maksimum 200 KB, 5,000 baris dan 2,000 peraturan Benarkan/Tidak Benar.

Contoh: Googlebot. Masukkan token sahaja, bukan rentetan Agen Pengguna penyemak imbas penuh.

Masukkan satu penuh HTTP atau HTTPS URL setiap baris, sehingga 100. Alat ini tidak membukanya.

Ini ialah pratonton setempat bagi peraturan Biasa/Tidak Benar, bukan emulator lengkap untuk setiap perangkak. Arahan yang tidak disokong dilaporkan sebagai diabaikan. robots.txt bukan kawalan akses dan tidak menjamin merangkak, mengindeks atau kedudukan.

Bagaimanakah cara saya menguji peraturan robots.txt?

Tampalkan kandungan fail, masukkan token perangkak seperti Googlebot, tambah satu URL penuh setiap baris dan pilih Peraturan ujian. Pratonton menunjukkan kumpulan yang dipilih dan peraturan padanan, jika ada.

Soalan lazim

Bagaimanakah cara saya menguji peraturan robots.txt?

Tampalkan kandungan fail, masukkan token perangkak seperti Googlebot, tambah satu URL penuh setiap baris dan pilih Peraturan ujian. Pratonton menunjukkan kumpulan yang dipilih dan peraturan padanan, jika ada.

Adakah penguji ini mengambil tapak web saya atau memuat naik URL saya?

Tidak. Ia hanya membaca teks dan URL yang anda masukkan dalam penyemak imbas ini. Ia tidak mengambil robots.txt, melawati URL atau memuat naik data anda.

Adakah robots.txt menghalang orang daripada membuka halaman?

Tidak. Ia memberikan arahan crawler; ia tidak melindungi data peribadi. Gunakan pengesahan atau kawalan akses pelayan untuk halaman peribadi.

Adakah URL yang dibenarkan perlu dipaparkan dalam hasil carian?

Tidak. Membenarkan merangkak tidak menjamin bahawa enjin carian akan merangkak, mengindeks atau meletakkan kedudukan URL.

Adakah alat ini menyemak Google, Bing atau perangkak lain secara langsung?

Tidak. Ia melihat peraturan biasa untuk token perangkak yang anda masukkan. Ia tidak menghubungi mana-mana enjin carian atau tapak web.