Robots.txt ジェネレーター

デフォルト - すべての Robots:

クロール - 遅延:

サイトマップ: （お持ちでない方は空欄にしてください）

検索 Robots:	Google
	Google Image
	Google Mobile
	MSN Search
	Yahoo
	Yahoo MM
	Yahoo Blogs
	Ask/Teoma
	GigaBlast
	DMOZ Checker
	Nutch
	Alexa/Wayback
	Baidu
	Naver
	MSN PicSearch

制限されたディレクトリ:	パスはルートからの相対パスで、最後にスラッシュを含む必要があります。 "/"

ルートディレクトリに robots.txt ファイルを作成してください。上記の文章をコピーして、テキストファイルに貼り付けてください。

概要： Robots.txt ジェネレーター

Robots.txt ジェネレーターは、robots.txt ファイルを簡単に作成することができます。

robots.txt ファイルとは、

robots.txt ファイルは、クローラがどのページやファイルをサイトからリクエストできるか、またはできないかを検索エンジンクローラに知らせるものです。これは主に、サイトでのリクエストのオーバーロードを避けるために使用され、Google にウェブページが表示されないようにするためのメカニズムではありません。