4

私たちのSEOチームは、メインの動的検索結果ページをスパイダーに開き、メタタグから「nofollow」を削除したいと考えています。現在、robots.txtでパスを許可することでスパイダーにアクセスできますが、メタタグに「nofollow」句があり、スパイダーが最初のページを超えないようになっています。

<meta name="robots" content="index,nofollow">

'nofollow'を削除すると、スパイダーが結果セットのすべてのページをクロールし始めるため、検索システムへの影響が壊滅的なものになるのではないかと心配しています。次の点についてアドバイスをいただければ幸いです。

1）メタタグから「nofollow」を削除する方法はありますが、スパイダーがページ上の特定のリンクのみをたどらないようにしますか？rel = "nofollow"についてさまざまな意見を読みましたが、これは実行可能なオプションですか？

<a rel="nofollow" href="http://www.mysite.com/paginglink" >Next Page</a>

2）クモがどこまで行くかの「深さ」を制御する方法はありますか？彼らが数ページをヒットしてから停止したとしても、それほど悪くはないでしょう。

3）検索結果ページには、標準の次/前のリンクがあります。これにより、理論上、スパイダーはページを無限に再帰的にヒットします。これはSEOにどのような影響を及ぼしますか？

スパイダーが異なれば動作も異なることは理解していますが、主にGoogle、Yahoo、MSNなどの大手企業に関係しています。

検索結果ページとページングリンクは、書き直されておらず、？name = valueクエリ文字列を持っているという点でボットフレンドリーではありませんが、私が見たところ、スパイダーは'？ ' 結果ページはまともなページランクで索引付けされているので。

4

3 に答える 3

2

Googleが、時間の終わりまで各ページに相対リンクがあるカレンダーシステムをインデックスに登録するのを見てきました（2038年1月19日-http: //en.wikipedia.org/wiki/Year_2038_problemを参照）。2038年の日付を処理するソースコードのバグが明らかになるまで、サーバーの負荷に気づきませんでした。

他の検索エンジンについてはわかりませんが、Googleは、googlebotがサーバーインフラストラクチャに与える影響を制御するための便利なツールを多数提供しています。http://www.google.com/webmasters/を参照してください。

ウェブマスターツールには、サイトのクロール速度を設定するオプションがあります。

于 2008-12-05T18:30:59.853 に答える
2

正直に言うと、あなたはnofollowを間違って見ています。検索スパイダーは、特にGoogle、Yahoo、MSNがnofollowページを検索している可能性があります。これらのページをヒットして、noindexがあるかどうかを確認する必要があるためです。

本当の問題は、nofollowが実際にフォローしないことを意味するのではなく、このリンクに私の評判を伝えないことを意味するだけです。したがって、ボットを積極的にブロックしていない限り、ボットはすでにサイトにアクセスしているため、リンクのROBOTSメタタグとロボットコマンドを変更してもパフォーマンスに影響はありません。これを確認するには、HTTPサーバーログを確認してください。

ですから、私の投票では、ロボットの制限を削除しても問題は発生しません。

于 2008-12-05T18:39:00.120 に答える
1

Googleボットは、動的に生成されたページのデータベース全体をトラバースしないことについて非常にインテリジェントです。ただし、URLが動的であることを示すヒント（つまり、.aspや.jspなどのファイル拡張子とクエリパラメーターとしての数値ID）を提供します。書き換えルールを使用してURLを「わかりやすい」ものにすると、ボットは、それが読み取っている静的ページなのか動的に生成されたページなのかを判断するのに苦労します。動的URLと静的URLの詳細については、このGoogleの記事を参照してください。

また、 Googleサイトマップを作成して、サイトのどのページをインデックスに登録でき、どのページをインデックスに登録できないかについてボットにわかりやすくすることを検討することもできます。

于 2008-12-05T18:23:33.037 に答える