Hadoop で単純な WordCount アプリケーションを実装しました。私のクラスターには、1 つの名前ノードと 4 つのデータノードがあります。Replication-rate は 4 に設定されています。ファイルシステムには、多くの lorem-impsum-files を配置しました。wordcount アプリケーションを実行しているときに、マッパーがまだ完成していなくても、リデューサーが機能していることがわかります。
2021-10-29 14:53:31,044 INFO mapreduce.Job: map 70% reduce 23%
これはどのように作動しますか?多くのチュートリアル ページ (たとえば 1 ページ) に次のように書かれてい ます。
マッピングの結果セットが完了していない場合、リデューサーはどのように機能しますか?