cURL を使用して Web サイトにリクエストを送信し、Web サイトに自分が検索エンジンであると認識させるにはどうすればよいですか。
質問する
11104 次
1 に答える
9
ユーザー エージェントを Googlebot に設定できます ( Google の KBで使用されている正確なユーザー エージェントに関する詳細情報)。
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)');
ただし、これは常に機能するとは限りません。一部の Web サイトでは、Googlebot であると主張する人をリバース DNS チェックすることを選択する場合があります。
于 2013-05-17T13:14:35.663 に答える