php - 一部のサイトはcurl phpでクロールできませんが、curlでは機能します

Question

curl php でhttp://marinas.comをカールしようとしました:

$url = 'http://marinas.com';

$ch = curl_init($url);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_exec($ch);
curl_close($ch);

それは何も返しません。他のサイト、たとえば google.com で試してみるとうまくいきますが。

また、 http://marinas.comを CLI に直接 curlすると…</p>

私にとっては謎です

Answer 1

リクエストを行うときにユーザー エージェントを設定します。

curl_setopt($ch, CURLOPT_USERAGENT, $_SERVER['HTTP_USER_AGENT']);

このサイトは、ユーザー エージェントのない要求には応答しません。上記の設定により、ブラウザのユーザー エージェントが取得され、ターゲット Web サイトに送信されます。