2

Googlebotクローラーを識別するための最も信頼性が高く最速の方法は何ですか？rDNSはスプーフィングされる可能性があるため、googlebotのIPリストが最も信頼できる方法のようです。実際のgooglebotipsを取得できるサイト/リソースはありますか？他のアイデアは歓迎します。

4

2 に答える 2

2

IPを本当にハードコーディングしたい場合（いつでも予告なしに変更される可能性があるため、お勧めしません）、ここにリストがあります。私がお勧めするのは（また、Goggle Webmasterのブログで推奨されていること）、これを確認するために逆引きDNSを実行してから順方向DNSを実行することです。これは常に機能するはずであり、なりすましはできません。

于 2011-10-25T10:22:20.540 に答える
0

Googleボットは次の範囲を使用します-

  • 203.208.60.0/24、
  • 66.249.64.0 / 20、
  • 2001：4860：4801：2：6b00：6006：1300：b075、
  • 2001：4860：4801：5：1000：6006：1300：b075、
  • 2001：4860：4801：6：e300：6006：1300：b075、
  • 2001：4860：4801：2001 :: 6006：1300：b075、
  • 2001：4860：4801：2002 :: 6006：1300：b075

詳細はこちら-

http://myip.ms/info/bots/Google_Bing_Yahoo_Facebook_etc_Bot_IP_Addresses.html

于 2013-10-14T17:26:10.897 に答える