hadoop - hadoop kill reducer タスクの再試行の原因となるもの

Question

Hadoop ジョブのレデューサー タスクの「Kill​​ed Task Attempts」の数値が非常に高いため、強制終了されたタスクのステータスを確認します。

Request received to kill task 'attempt_201308122006_41526_r_000030_1' by user
-------
Task has been KILLED_UNCLEAN by the user

stdout および stderr ログなし

何が原因でしょうか？どうすれば解決できますか？

Answer 1

投機的な実行ではない場合、minMaps と minReduces を使用してプールのタスク トラッカーを要求する際に、Fair Scheduler が開始された可能性があります。