1

以下のように1行のコンテンツでrobots.txtを使用することに意味はありますか

ユーザーエージェント: *

まったく持っていないのに比べて?

4

2 に答える 2

1

いいえ; それをする意味はありません。

于 2010-02-24T14:28:03.667 に答える
0

いいえ、グーグル(そして、ブッシュを打ち負かさないでください、グーグルはあなたが気にかけるべき検索エンジンです)は、あなたがそうしないように言わない限り、デフォルトですべてをクロールします。

Googleを支援したい場合は、Googleウェブマスターツールを使用して、正しい形式でサイトマップを送信してください

http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156184

于 2010-02-24T14:28:05.773 に答える