2

今日、Google での検索で問題が発生しました。Googleで「trakopolis」と入力すると、私のページが表示されます（Googleロボットによってインデックスが作成されます）が、ページの説明は利用できません。私のウェブサイトに説明があることは非常に重要です。

ウェブサイトは次のとおりです。

https://trakopolis.com

robots txt ファイルは次のとおりであるため、すべてを許可します。

User-agent: *
Allow: /

https://www.google.com.ua/?gws_rd=cr#gs_rn=23&gs_ri=psy-ab&tok=O7cIXclKCSxtMd3uDVRVhg&cp=2&gs_id=h&xhr=t&q=trakopolis&es_nrs=true&pf=p&output=search&sclient=psy-ab&oq=tr&gs_l=&pbx=1&bav =on.2,or.r_qf.&bvm=bv.50165853,d.bGE&fp=d3f611552977418f&biw=1680&bih=949

しかし、ご覧のとおり、説明は利用できません。混乱しました:(質問がばかげている場合は申し訳ありません。

Googleウェブマスターツールからわかるように。Google はこの robots.txt ファイルを使用しているため、http から https へのリダイレクトの問題でしょうか? Web サイトでは http が許可されていないため、https を使用しています。メイン ページでは、ユーザーが認証されなかった場合に備えて、Login.aspx ページへのリダイレクトを使用します。

4

1 に答える 1

0

「 trakopolis」を検索すると、Google で説明が表示されます。

ここに画像の説明を入力

DuckDuckGoなどの他の検索エンジンでは、説明の表示が許可されていないと表示されるため、robots.txt はしばらく前にサイトのクロールを許可していないようです。

robots.txt は、元の robots.txt 仕様Allowの一部ではない を使用していることに注意してください(ただし、多くのパーサーはとにかくそれを理解しています)。それは以下と同等です:

User-agent: *
Disallow:

(ただし、パーサーは不明なフィールドを無視する必要があるため、 を使用しても問題はありませんAllow。空または存在しない robots.txt は、常にすべてのクロールを許可します。)

于 2013-08-03T15:00:16.683 に答える