このスライドで遅延公平スケジューリングについて読んだとき、Hadoop の「ジョブ スケジューリング」と「タスク スケジューリング」という用語について少し混乱しました。
次の仮定が間違っている場合は、修正してください。
デフォルト スケジューラ、キャパシティ スケジューラ、公正スケジューラは、複数のジョブがユーザーによってスケジュールされている場合、ジョブ レベルでのみ有効です。システムに単一のジョブしかない場合、それらは何の役割も果たしません。これらのスケジューリング アルゴリズムは、「ジョブ スケジューリング」の基礎を形成します。
各ジョブには複数の map および reduce タスクを含めることができますが、それらは各マシンにどのように割り当てられますか? 単一のジョブのタスクはどのようにスケジュールされますか? 「タスクスケジューリング」の根拠は？