ตรวจสอบ Robots.txt

คำแนะนำที่เกี่ยวข้อง

กรณีการใช้งาน

• เมื่อหน้าไม่ถูกเก็บเข้าดัชนีเป็นเวลานาน ตรวจสอบก่อนว่า robots.txt บล็อกเส้นทางที่เกี่ยวข้องหรือไม่
• ยืนยันกฎครอว์ลเลอร์ใหม่มีผลตามคาดหลังแก้ไขเว็บไซต์ หลีกเลี่ยงกฎเก่าค้างอยู่
• ทดสอบว่าเส้นทาง URL ที่ระบุอนุญาตให้ครอว์ลเลอร์เป้าหมายครอว์ลหรือไม่ ยืนยันการกำหนดค่า Allow/Disallow
• แยกคำประกาศ Sitemap ยืนยันว่าที่อยู่แผนผังเว็บไซต์กำหนดค่าถูกต้อง ช่วยให้เครื่องมือค้นพบ

วิธีการใช้งาน

1. ป้อนชื่อโดเมนเว็บไซต์หรือ URL แบบเต็มของ robots.txt
2. เครื่องมือดึงและแยกวิเคราะห์เนื้อหากฎ robots.txt โดยอัตโนมัติและแสดงแบบมีโครงสร้าง
3. ป้อนเส้นทางที่ต้องการทดสอบเพื่อดูว่าอนุญาตให้ครอว์ลเลอร์เป้าหมายครอว์ลหรือไม่
4. ดูคำประกาศ Sitemap และโครงสร้างกฎแบบเต็มสำหรับการเพิ่มประสิทธิภาพ SEO และการตรวจสอบ

คุณสมบัติ

• ตัดสินได้โดยตรงว่าเส้นทางที่ระบุอนุญาตหรือไม่: ไม่ต้องคาดเดากฎด้วยมือ
• เหมาะตรวจสอบการเก็บเข้าดัชนีผิดปกติ: ไดเรกทอรีถูกบล็อกผิด, กฎผิดง่ายถูกมองข้าม
• ดูคำประกาศ Sitemap ได้พร้อมกัน: ตรวจสอบกฎการครอว์ลและข้อมูลแผนผังเว็บไซต์พร้อมกัน
• คุ้มค่าตรวจสอบหลังแก้ไข: อัปเดต CMS, ปรับไดเรกทอรี, เปลี่ยนกฎสามารถค้นพบปัญหาได้ทันที

คำถามที่พบบ่อย