2

アプリケーションの送信速度を900kbpsに制限しようとしていますが、問題は、使用するプロトコルがメッセージ指向であり、メッセージのサイズが大きく異なることです。40バイトから125000バイトまでのメッセージを含めることができ、すべてのメッセージはアトミック単位として送信されます。

トークンバケットバッファを実装しようとしましたが、バケットサイズを小さく設定すると、大きなパケットは送信されず、バケットが大きくなると、レート制限のない大きなバーストが発生します。

これはCでの私の小さな実装です:

typedef struct token_buffer {
  size_t capacity;
  size_t tokens;
  double rate;
  uint64_t timestamp;

} token_buffer;


static uint64_t time_now()
{
  struct timeval ts;
  gettimeofday(&ts, NULL);
  return (uint64_t)(ts.tv_sec * 1000 + ts.tv_usec/1000);
}

static int token_buffer_init(token_buffer *tbf, size_t max_burst, double rate)
{
  tbf->capacity = max_burst;
  tbf->tokens   = max_burst;
  tbf->rate = rate;
  tbf->timestamp = time_now();
}

static size_t token_buffer_consume(token_buffer *tbf, size_t bytes)
{
  // Update the tokens
  uint64_t now = time_now();
  size_t delta = (size_t)(tbf->rate * (now - tbf->timestamp));
  tbf->tokens = (tbf->capacity < tbf->tokens+delta)?tbf->capacity:tbf->tokens+delta;
  tbf->timestamp = now;

  fprintf(stdout, "TOKENS %d  bytes: %d\n", tbf->tokens, bytes);

  if(bytes <= tbf->tokens) {
    tbf->tokens -= bytes;
  } else {
    return -1;
  }

  return 0;
}

次に、main()のどこか:

while(1) {
  len = read_msg(&msg, file);

  // Loop until we have enough tokens.
  // if len is larger than the bucket capacity the loop never ends.
  // if the capacity is too large then no rate limit occurs.
  while(token_buffer_consume(&tbf,msg, len) != 0) {}

  send_to_net(&msg, len);
}
4

1 に答える 1

2

max_burst(最初はtbf-> capacityに割り当てられます)によって最大メッセージサイズを制限しています-tbf-> tokensがその値を超えて増加することはないため、このチェックのために大きなメッセージが送信されることはありません。

if(bytes <= tbf->tokens) {
    tbf->tokens -= bytes;
  } else {
    return -1;
  }

したがって、コードは実際にバーストのハード制限をmax_burstに設定します。したがって、このバーストサイズが必要な場合は、メッセージをフラグメント化する必要があります。

これがリミッターを挿入できるコード内の唯一の場所であると仮定すると、上記の部分を次のように置き換えると、より良い結果が得られる可能性があります。

if(tbf->tokens > 0) {
  tbf->tokens -= bytes;
} else {
  return -1;
}

セマンティクスはわずかに異なりますが、平均して長期間にわたって、おおよそ探しているレートが得られるはずです。もちろん、1gbpsリンクを介して1つのメッセージで125Kを送信する場合、900kbpsのレートについて話すことはほとんどできません-パケットの完全な1gbpsバーストになり、低速リンクがある場合に備えてどこかにキューに入れる必要があります-したがってその場合、一部のパケットを失う準備をしてください。

ただし、アプリケーションと使用しているトランスポートネットワークプロトコル(TCP / UDP / SCTP / ...?)によっては、シェーピングコードをスタックの下に移動することをお勧めします。ネットワーク上のパケットは通常最大1500バイトしかないためです。とにかく(さまざまなネットワーク/トランスポートプロトコルヘッダーを含む)

テストで興味深いと思われることの1つは、http://www.linuxfoundation.org/en/Net:Netemです。目的が小容量のリンクに取り組むことである場合。または、1mbpsのシリアルポートが連続して接続されている古いルーターをいくつか入手します。

于 2009-07-17T23:29:37.040 に答える