เครื่องมือสร้าง Robots.txt

ค่าเริ่มต้น - Robots ทั้งหมด

ระยะเวลาหน่วงในการดึงข้อมูล (Crawl-delay)

URL ของ Sitemap (ทางเลือก)

หุ่นยนต์ค้นหา (Search Robots)

Google

Google Image

Google Mobile

MSN Search

Yahoo

Ask/Teoma

Cuil

GigaBlast

DMOZ Checker

Nutch

Alexa/Wayback

Baidu

Naver

Yandex

เส้นทางที่จำกัด (หนึ่งรายการต่อบรรทัด เช่น /cgi-bin/)

ไฟล์ robots.txt ของคุณ: