0

map-reduce ジョブを処理する前に、copyFromlocal/put ファイルを hdfs にコピーしますか? mapreduce の例を実行すると、マスター ノードで hdfs をフォーマットし、コピー元ローカル ファイルをマスターのその hdfs スペースにコピーするように教えられました。

次に、一部のチュートリアルでは、マスター ノードがメタデータをクライアントに通知するだけであると述べたのはなぜですか。例: http://www.youtube.com/watch?v=ziqx2hJY8Hg at 25:50. このチュートリアルに基づく私の理解では、ファイル (ブロックで分割) がスレーブ ノードにコピーされるということです。そのため、copyFromlocal /put ファイルをマスター ノードにコピーする必要はありません。私はとても混乱しました。ファイルがコピー/複製される場所を誰か説明できますか?

4

2 に答える 2