Google がサイトを再クロールするのはいつですか。また、なぜ Google はキャッシュに同じページの 2 つのバージョンを持っているのでしょうか??
http://forum.portal.edu.ro/index.php?showtopic=112733 キャッシュ ページ: forum.portal.edu.ro/index.php?showtopic=112733&st=25/ forum.portal.edu.ro/index .php?showtopic=112733&st=50
Googleのクロールポリシーに関しては多くの議論があります。あなたができる最善のことは、あなたのログをチェックして、あなたのサイトの彼らのスケジュールが何であるかを決定することです。
キャッシュ内の複数のエントリに関しては、Googleはそれらが同じページではないことを知る方法がありません。それらは異なるURLとおそらく異なるデータを持っています。特定のページを使用する場合は、を使用してみてください<link rel="canonical" href="(standard URL)">。
@Chris：[サイトの構成]>[設定]>[カスタムクロールレートの設定]。この設定は、サイトをクロールできる速度を決定するだけで、クロールの頻度は設定しません。サイトのクロールを増やすには、サイトのリンクを他のサイトにも投稿してみてください。
ページが再クロールされる頻度は、ページのランキングの高さ、およびサイトマップで提案した更新間隔によって異なります。ページのコンテンツや、ページにリンクしているサイトの種類など、他のいくつかの要素も考慮に入れることができます。
キャッシュ内の2つのページはまったく同じページではありません。1つはスレッドの2ページ目で、もう1つは3ページ目です。それらは異なるURLと異なるコンテンツを持っているので、それらは別々のページです。
本当にページを検索エンジンで同じものとしてカウントしたい場合は、linkタグを使用rel="canonical"してスレッドの最初のページを指すことができます。
以下を調整することにより、クロールの速度を上げることができます。
サイト構成>設定>カスタムクロールレートの設定
ウェブサイトのコンテンツのタイプに依存し、PageRank にも依存する場合があります。めったに更新されない情報を提供する静的なページは、1 か月おきにアクセスされる可能性があり、1 日に多くの投稿がある人気のブログは、1 日に数回クロールされる可能性があります。(ただし、ブログの場合、通常、ブログ ソフトウェアは検索エンジンに ping を送信するため、オンデマンドでクロールされます)
これらはトラフィックの少ないサイトのフォーラム投稿であるように思われるため、週に数回クロールされるはずです。現在、Alexa でのランキングが 8,000,000 未満である私のウェブサイトでさえ、ほぼ毎日のように robots.txt リクエストで毎週から隔週でクロールされます。
似た内容のページは自動的にグループ化されるはずですが、グループ化されていない場合は、他の回答者の rel="canonical" ヒントを試してください。
@Chris: いいえ、その設定はサイトがクロールされる頻度を変更するのではなく、クロール中に Google がページをリクエストする速度のみを変更します。これは誤解を招く設定であり、ヘルプ ページで明確に示されているにもかかわらず、多くの人がその間違いを犯しています。