ツールのリアルタイムのメトリクスと分析部分には、ElasticSearch を使用しています。データをクエリするとき、ElasticSearch は非常にクールで高速です。(統計ファセットと用語ファセット)
しかし、時間ごとのデータをインデックス化しようとすると問題が発生します。他のサービスからすべてのメトリック データを収集します。まず、他のサービスからデータを収集し、RabbitMQ プロセスで保存します。しかし、キュー ワーカーが ES にインデックスを付けずにすべての時間単位のデータを実行する場合。通常、ES およびその他のデータ インデックスの %40 が失われます。
では、トラフィックの多い環境で ES をインデックス化するときの考えは?