performance - データを Berkeley DB に挿入すると、ビッグ データでのパフォーマンスが非常に低下します

Question

私はすでに 80G Berkeley DB ファイルを保持しています。平均挿入速度は、トランザクションなしで 1 つのレコード (32 バイトのキー/100 バイトの値) で 8 ミリ秒です。

同じインターフェースの空のデータベースへの挿入と比較すると、平均速度は 3~6 us です。

Answer 1

バッファが空のときにデータを挿入すると、システムのバッファがいっぱいになると、バッファスペースが空くまで続行できません。たとえば、HDD にデータを書き込む時間は通常 8 ミリ秒です。

システムが静かになった後、バッファがいっぱいでないときのレイテンシがどのようなものかを確認した後、たとえば 100 万件のレコードのバストをテストします。