Robots.txt 生成器

デフォルト - すべてのロボット

クロール遅延

Sitemap URL (任意)

検索ロボット

Google

Google 画像

Google モバイル

MSN 検索

Yahoo

Ask/Teoma

Cuil

GigaBlast

DMOZ チェッカー

Nutch

Alexa/Wayback

百度 (Baidu)

Naver

Yandex

制限されたパス (1 行に 1 つ、例: /cgi-bin/)

生成された robots.txt ファイル: