hadoop - Hadoopの全体的なレビューを探しています

Question

Hadoop（300-600ボックスクラスター、コモディティハードウェア）、特に次の側面に関するパフォーマンスレビューを探しています。

1. 高い同時読み取りおよび書き込み
2. Webクロール
3. Mapreduce、並列コンピューティング
4. 転置インデックス

Answer 1

これは特定の質問ではありません。おそらくそれが今まで誰も答えなかった理由です。3〜600ノードのクラスターのパフォーマンスは、ベンチマークを使用して最もよく分析できます。

ただし、Hadoopとその本番環境での実装に関する非常に興味深い記事をいくつか見つけました。

• FacebookでのHadoopアーキテクチャとその使用法
• RackspaceがMapReduceとHadoopを使用してテラバイトのデータをクエリする方法
• いくつかのベンチマークは、Hadoopが16.25時間でペタバイトをソートし、62秒でテラバイトをソートする記事にあります。
• また、 Hadoopに関連する非常に興味深いブログ
• FacebookとHadoopに関連する別の記事はHiveです-Hadoopを使用したペタバイト規模のデータウェアハウス

これらのリンクがあなたを始めさせ、あなたが必要とするすべての情報をあなたに与えることを願っています。