ตัวตรวจ robots.txt
ออกแบบเพื่อความเป็นส่วนตัว — ทำงานในเบราว์เซอร์ของคุณทั้งหมด
วาง robots.txt ของคุณ เครื่องมือจะชี้ข้อผิดพลาดไวยากรณ์ directive ที่ไร้คู่กลุ่ม กฎที่ไม่รู้จัก และฟิลด์นอกมาตรฐานพร้อมหมายเลขบรรทัด
เครื่องมือนี้ตรวจกฎอะไรบ้าง
การจัดกลุ่ม User-agent ตำแหน่ง Disallow/Allow ความถูกต้องของ URL Sitemap ค่า Crawl-delay (เตือนว่านอกมาตรฐาน) และคำสั่งที่ไม่รู้จัก ทุกปัญหาจะแสดงหมายเลขบรรทัดเพื่อให้แก้ไขได้รวดเร็ว
จะบอกได้ไหมว่า URL หนึ่ง ๆ ถูกบล็อก
ยังไม่ได้ การตรวจปัจจุบันเป็นเชิงโครงสร้างเท่านั้น ให้คู่กับ robots.txt tester ของ Google Search Console สำหรับการประเมินตามเส้นทาง
ทำไม Crawl-delay จึงเป็นคำเตือน
Googlebot ไม่สนใจ Crawl-delay แต่ Bing และ Yandex ปฏิบัติตาม คำเตือนทำให้คุณทราบว่าใช้กับ Google ไม่ได้ ขณะยังคงไว้สำหรับเครื่องมือค้นหาอื่นได้
คำถามที่พบบ่อย
- เครื่องมือนี้ตรวจกฎอะไรบ้าง?
- การจัดกลุ่ม User-agent ตำแหน่ง Disallow/Allow ความถูกต้องของ URL Sitemap ค่า Crawl-delay (เตือนว่านอกมาตรฐาน) และคำสั่งที่ไม่รู้จัก ทุกปัญหาจะแสดงหมายเลขบรรทัดเพื่อให้แก้ไขได้รวดเร็ว
- จะบอกได้ไหมว่า URL หนึ่ง ๆ ถูกบล็อก?
- ยังไม่ได้ การตรวจปัจจุบันเป็นเชิงโครงสร้างเท่านั้น ให้คู่กับ robots.txt tester ของ Google Search Console สำหรับการประเมินตามเส้นทาง
- ทำไม Crawl-delay จึงเป็นคำเตือน?
- Googlebot ไม่สนใจ Crawl-delay แต่ Bing และ Yandex ปฏิบัติตาม คำเตือนทำให้คุณทราบว่าใช้กับ Google ไม่ได้ ขณะยังคงไว้สำหรับเครื่องมือค้นหาอื่นได้
- มีอะไรถูกอัปโหลดไหม?
- ไม่มี เนื้อหา robots.txt อยู่ในแท็บนี้เท่านั้น ไม่มีการบันทึก และไม่มีอนาไลติกบนข้อมูลอินพุต