何年も前にrobots.txtファイルをGoogleに送信しましたが、それでも最初の行で理解できない構文が表示されます。
グーグルした後、最も一般的な問題はグーグルが「？」を追加することです 行の始めに、しかしそれは私にそれをしていません。
robots.txtへのURLは
www.leisurepursuits.co.uk/robots.txt
エラーは次のとおりです。
1行目：ユーザーエージェント：*構文が理解されていません
質問する
8343 次
1 に答える
24
このエラーは、予想されるrobots.txtファイル形式がUTF-8でエンコードされたプレーンテキストであるために表示されます。このファイルは、CR、CR / LF、またはLFで区切られたレコード（行）で構成されています。
文字エンコードがUTF-8のサブセットでない場合、robots.txtファイルが正しく解析されていません。
まず、2番目のオプション「ソースの表示」を選択してhttp://www.asymptoticdesign.co.uk/cgi-bin/check-url.plでrobots.txtのURLを確認し、正常に応答するかどうかを確認します。
次に、robots.txtファイルを再度アップロードします。前に示したようなエラーは表示されません。
于 2013-01-18T07:15:35.973 に答える