Robots.txt 生成器

默认 - 所有机器人

抓取延迟

Sitemap 网址 (可选)

搜索引擎机器人

谷歌

谷歌图片

谷歌手机

MSN 搜索

雅虎

Ask/Teoma

Cuil

GigaBlast

DMOZ 检查器

Nutch

Alexa/Wayback

百度

Naver

Yandex

受限路径 (每行一个，例如 /cgi-bin/)

您的 robots.txt 文件: