urllib2 を介してスレッド化された Web サイトを読み取る比較的小さなクローラーがあります。今、私は何千もの Web ページを上向きの ID で読まなければならないという問題を抱えています。一部の Web サイトでは正常に機能しますが、他の Web サイトでは「このサイトでは JavaScript と Cookie を有効にする必要があります」などのエラーが表示されます。これを最も簡単な方法で修正する方法を知っている人はいますか? そして、私のクローラーを遅くしません.....
ありがとう...