シナリオ: 当社の DB は巨大で (データ量は最大 20 TB)、毎日データを追加し続けています。特定のデータ集計を表示することで、ユーザーがデータベースとやり取りすることができる Web ページを作成したいと考えています。リアルタイムでクエリ (または mapreduce を実行) するには遅すぎます。そのため、事前に計算された集計のデータ キャッシュを作成し、それを毎日段階的に更新することになります。
すでにこれを処理しているmongodb上にある現在のライブラリまたはソフトウェアはありますか? これを行うためのよりよく知られている方法はありますか?