hadoop - ワードカウント: 投機的実行をオフにして、ブロックごとに 1 つ以上のマップ タスク

Question

Wordcount では、投機的実行をオフにすると、ブロックごとに複数のマップ タスクを取得できるようです。

ジョブトラッカーは内部で何らかの魔法をかけて、InputSplits によって提供される以上のタスクを分散しますか?

Answer 1

ブロックとスプリットは別物です。ブロックに複数の分割がある場合、1 つのブロックに対して複数のマッパーを取得する場合があります。