重複の可能性:
Google は AJAX コンテンツをクロールしますか?
だから私はフォーラムを持っています - リンクは次の URL 形式です COURSE PAGE - http://www.example.com/course/course-feed/course_id/1
このページにはたくさんの質問があり、各質問にはリンクがあり、クリックすると質問の詳細ページに移動し、その質問に対するすべての回答が表示されます -
詳細な質問ページのフォーマット例 url QUESTION PAGE - http://www.example.com/course/question-feed/course_question_id/636
したがって、5000 の質問がある場合、5000 の質問ページに回答があります。
私の質問はCOURSE PAGEです。明らかに、5000問すべてが表示されるわけではありません。むしろ、50 の質問リンクが表示され、下部に「MORE」ボタンがあります。
ユーザーが「MORE」をクリックすると、次の 50 個の質問が JQUERY 呼び出しによって取得され、下に表示されます。この操作が行われると、URL は明らかに変更されません。
最近、Google でインデックスされたページの数を調べたところ、最初の 50 の質問ページのみでした。インデックスされたコース ページには 50 の質問リンクしか表示されないためです。
私の質問は、クローラーがすべての「MORE」リンクを通過し、5000 ページすべてにインデックスを付ける方法です。