Webページをスクレイピングするために「for」ループを大量に実行するコードを書いています。コードは次のようなものです:
var request = require('request');
for(i=0; i<10000; i++){
//request goes here, with processing in its callback
}
しかし、これはソケットのハングアップを引き起こします。次に、これを行うために同期要求を試みましたが、コードは正常に機能し、要求ごとに要求を処理しますが、これにより実行が非常に遅くなります。たとえば、スクレイピングのために大量の Web リクエストを処理する方法を教えてください。