-1

Stackoverflow API を使用して、Stackoverflow でタグを収集しています。私は NodeJS を使用しており、典型的な問題に直面しています。私のレート制限は、230-250 リクエストの後に超えられます。したがって、私のプログラムによれば正常に動作するはずですが、代わりに200サイクル以上後に例外が発生します.MY nodejsコードは次のとおりです:-

var request=require('superagent');
var request=require('mongoose');
mongoose.connect('mongodb://shivkumarganesh:11111@paulo.mongohq.com:10090/lklklklkkkkl_gshiv_sk');
var db = mongoose.connection;
db.on('error', console.error.bind(console, 'connection error:'));
db.once('open', function callback () {
  console.log('Connected');
});

//Schema for Tags
var tagSchema = mongoose.Schema({
    name:String,
    count:Number,
    is_required:Boolean
,    is_moderator_only:Boolean,
    has_synonyms:Boolean});

var Tags = mongoose.model('Tags', tagSchema);

var saveSchema = function(Model){
    Model.save();
}
 ///usr/local/lib/node_modules/superagent  
var i=1;
var req=function(){
    request.get('http://api.stackexchange.com/2.1/tags?page='+i+'&pagesize=100&fromdate=1199145600&todate=1377648000&order=asc&sort=popular&site=stackoverflow')
   .set('X-API-Key', 'foobar')
   .set('Accept', 'application/json')
   .end(function(res){
     if (res.ok && i<346) {
       console.log('yay got ' + res.body);
       var jsonResponse = res.body;
       console.log(jsonResponse.items.length);
       for(var j=0;j<jsonResponse.items.length;j++)
       {
           var model = new Tags(jsonResponse.items[j]);
           saveSchema(model);
       }
       i++;
       console.log("Number of Iteration ---- > "+i);
       setTimeout(function() {
           req();
       }, 3000);

     } else {
       console.log('Oh no! error ' + res.text);
       console.log('Processing Over'+i)
     }
   });

}
req();

これを理解するのを手伝ってください。可能であれば、プログラムを修正してください。注: MongoHQ を使ってデータを保存しています。

4

1 に答える 1

1

この有益なリンクを読む必要があります: https://api.stackexchange.com/docs/throttle

具体的には：

動的スロットルも、メソッドごとのレベルで配置されています。アプリケーションが backoff フィールドが設定された応答を受信した場合、同じメソッドを再度ヒットする前に、その秒数待機する必要があります。

そのため、返されたフィールドをチェックアウトし、backoff別のリクエストを行う前に、それだけ待ってください。

于 2013-08-28T22:12:07.993 に答える