ใช้ฟรี ไม่ต้องมีบัญชี

ตัวทดสอบ robots.txt

วางข้อความ robots.txt ป้อนโทเค็นผลิตภัณฑ์ของโปรแกรมรวบรวมข้อมูล และทดสอบ URL ได้สูงสุด 100 รายการ ผลลัพธ์จะถูกคำนวณบนอุปกรณ์นี้ ไม่มีอะไรถูกดึงหรืออัพโหลด

วางกฎที่นี่ สูงสุด 200 KB, 5,000 บรรทัด และ 2,000 กฎอนุญาต/ไม่อนุญาต

ตัวอย่าง: Googlebot ป้อนโทเค็นเท่านั้น ไม่ใช่สตริง User-Agent แบบเต็มของเบราว์เซอร์

ป้อน HTTP หรือ HTTPS URL แบบเต็มต่อบรรทัด สูงสุด 100 รายการ เครื่องมือนี้จะไม่เปิดขึ้นมา

นี่เป็นการแสดงตัวอย่างกฎอนุญาต/ไม่อนุญาตทั่วไปในเครื่อง ไม่ใช่โปรแกรมจำลองที่สมบูรณ์สำหรับโปรแกรมรวบรวมข้อมูลทุกตัว คำสั่งที่ไม่สนับสนุนจะถูกรายงานว่าถูกละเว้น robots.txt ไม่ใช่การควบคุมการเข้าถึงและไม่รับประกันการรวบรวมข้อมูล การจัดทำดัชนี หรือการจัดอันดับ

ฉันจะทดสอบกฎ robots.txt ได้อย่างไร

วางเนื้อหาไฟล์ ป้อนโทเค็นของโปรแกรมรวบรวมข้อมูล เช่น Googlebot เพิ่ม URL แบบเต็ม 1 รายการต่อบรรทัด และเลือกกฎการทดสอบ การแสดงตัวอย่างจะแสดงกลุ่มที่เลือกและกฎการจับคู่ ถ้ามี

คำถามที่พบบ่อย

ฉันจะทดสอบกฎ robots.txt ได้อย่างไร

วางเนื้อหาไฟล์ ป้อนโทเค็นของโปรแกรมรวบรวมข้อมูล เช่น Googlebot เพิ่ม URL แบบเต็ม 1 รายการต่อบรรทัด และเลือกกฎการทดสอบ การแสดงตัวอย่างจะแสดงกลุ่มที่เลือกและกฎการจับคู่ ถ้ามี

ผู้ทดสอบนี้ดึงข้อมูลเว็บไซต์ของฉันหรืออัปโหลด URL ของฉันหรือไม่

ไม่ มันจะอ่านเฉพาะข้อความและ URL ที่คุณป้อนในเบราว์เซอร์นี้เท่านั้น โดยจะไม่ดึงข้อมูล robots.txt, ไปที่ URL หรืออัปโหลดข้อมูลของคุณ

robots.txt ป้องกันไม่ให้ผู้คนเปิดเพจหรือไม่

ไม่ มันให้คำแนะนำแก่โปรแกรมรวบรวมข้อมูล มันไม่ได้ปกป้องข้อมูลส่วนตัว ใช้การตรวจสอบสิทธิ์หรือการควบคุมการเข้าถึงเซิร์ฟเวอร์สำหรับเพจส่วนตัว

URL ที่ได้รับอนุญาตต้องปรากฏในผลการค้นหาหรือไม่

ไม่ การอนุญาตให้รวบรวมข้อมูลไม่ได้รับประกันว่าเครื่องมือค้นหาจะรวบรวมข้อมูล จัดทำดัชนี หรือจัดอันดับ URL

เครื่องมือนี้ตรวจสอบ Google, Bing หรือโปรแกรมรวบรวมข้อมูลอื่น ๆ หรือไม่?

ไม่ โดยจะแสดงตัวอย่างกฎทั่วไปสำหรับโทเค็นของโปรแกรมรวบรวมข้อมูลที่คุณป้อน มันไม่ได้ติดต่อกับเครื่องมือค้นหาหรือเว็บไซต์ใด ๆ