5

Twitter Storm と Apache Hadoopのアーキテクチャ上の違いを説明してくれる人がいれば、それは素晴らしいことです。リアルタイム v/s バッチ処理を超えたいくつかの内部的なものを探しています。両方のテクノロジーは、Hadoop での Storm または map-reduce のトポロジーの記述に関して、Hadoop のタスク トラッカー/ジョブ トラッカーおよび同等の Storm の Nimbus/スーパーバイザーに関して、Hadoop パーティションおよび同等のシャッフル (ランダム、フィールドなど)ストームなどで(ストームがスパウト/ボルト間でデータを転送するためにメッセージキューを内部的に使用していると言ったら正しいですか。これは、作成された中間ファイルがあり、したがってI / OがあるHadoopには正確には当てはまりません関与。)

編集:

Hadoop と比較した Apache Stormという質問に答えましたが、受け入れられた回答により、ユースケース、つまりリアルタイム v/s バッチ処理以外のことを知りたいという欲求が残りました。

4

2 に答える 2

3

Nathan Marz (Storm の作成者) は、ビッグ データに関する本を執筆しており、Hadoop、Storm、およびその他のテクノロジを使用してビッグ データ システムを作成する方法について説明しています。

この本では、「ラムダ アーキテクチャ」について説明しています。Nathan Marz 自身によるこのスライドをご覧ください:ビッグデータの暴走する複雑さ...そしてそれを止める計画

于 2013-08-07T14:34:33.003 に答える