複数の (実際には長いリストの) Facebook ページの統計を行うための PHP Web アプリケーションを作成しています。Facebook からすべてのページのデータを毎日取得するようにクローラーを設定して、データがローカル データベースで常に更新されるようにしました。
問題は、クローラーが予期せず壊れることがあることです。私が推測している理由は次のとおりです: 1) サーバーの時間制限を使い果たしている 2) 応答なしでデータを待ちすぎて殺されている
この問題を解決するための提案はありますか? どうもありがとう！！