SEO の基盤がカバーされていることを確認するために、いくつかの Web サイトを見直しています。問題のサイトには非公開ページはなく、すべてのページをインデックスに登録したいと考えています。とにかく robots.txt ファイルを含めることは、たとえそれが必要でなくても、Google にとってサイトの評判と重要性を高めますか?
1359 次
6 に答える
9
それがないと、サーバーはまだリクエスタに 404 メッセージを吐き出しているため、空白のものを含めるだけです。これはおそらく空の robots.txt ファイルよりも大きいです。
于 2009-04-30T18:55:38.970 に答える
3
Googleによると、それは良い考えです。彼らの指示/ガイドラインは実際にはかなり徹底しています.
于 2009-04-30T18:56:27.050 に答える
2
グーグルだけがそれに答えることができます。
ウィキペディアによると、robots.txt はブラックリスト、レート制限、サイトマップ専用です。
于 2009-04-30T18:55:33.277 に答える
0
いいえ、しません。
Google には決定すべき独自のルールがあり、robots.txt の存在に依存しません。
于 2009-04-30T18:55:00.703 に答える
0
検索エンジンは robots.txt ファイルを探します。そこにない場合、検索エンジンは 404 を取得します。空白であっても、1 つあることをお勧めします。
于 2009-04-30T18:58:14.300 に答える