asp.net - ASP.Net 認証と Googlebot

Question

フォーム認証が有効になっている ASP.Net 3.5 Web サイトがあります。ユーザー名とパスワードの入力を求められることなく、Googlebot に私のウェブサイトをクロールさせることはできますか?

score 3 · Accepted Answer

Googleは、実際にはユーザー名とパスワードを要求するため、ページをインデックスに登録して、利用できないユーザーにそれらを表示することはないと主張しています。

AdSense によって保護ページをクロールするオプションのみを提供できるため、どの広告を表示するかを知ることができます。

ボットであるか、Google ボットコンピューターから送信されているかを確認する他のソリューションは安全ではありません。ユーザーによる簡単ななりすましが可能であり、ページのプレビューやキャッシュの表示に失敗する可能性があるためです。

したがって、ページの一部を表示し、ユーザーが登録していない場合は他の部分を非表示にするために、サイトの構造、非常に重要なものと重要でないものを考える必要があります。そうすれば、ログインしていなくても、Google は何かをインデックスに登録できます。 .

score 0 · Accepted Answer

ここに記事があります：

Google サイトマップが Google でページを表示する結果になるかどうかを確認するのは興味深いことですが、とにかくページをクロールする必要がある可能性が高いため、それが機能するかどうかは疑問です.

そして、ここにいくつかの他の興味深いコメントがあります：

2 に答える 2