問題タブ [hadoop-yarn]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - Hadoop Apache 2.2 の最大スケジュール可能アプリケーションを変更する方法
私は容量スケジューラで遊んでいます。クラスターで実行されているアプリケーションの総数と、ユーザーが送信できるアプリケーションの総数をそれぞれ 1 つ以上更新しました。ただし、複数のジョブを送信することはできません。Web Interface で利用可能なスケジューラ構成を調べていたところ、値が 1 の Max Schedulable Applications に出会いました。
スケジュール可能なアプリケーションの最大数を 1 より多くするには、どのプロパティを追加する必要があるか教えてください。
java - Hadoop JobClient.runJob: クラスターを初期化できません - 誤解を招くエラー メッセージ (?) と提案された解決策
(この投稿の最後に指定されているように、依存関係を追加することでこの問題を解決しましたが、より良い代替手段があるかどうか、または何か重要なことを見逃していないか疑問に思っていますか?)
mapreduce ジョブを実行しようとすると、行
次のエラー スタックが表示されます。
私のセットアップは次のとおりです。
構成の確認と再確認にかなりの時間を費やした後、次の依存関係をプロジェクトに追加することで問題を解決できました。
hadoop-mapreduce-client-jobclient
ここに何かが欠けていますか、それともエラーメッセージは特に誤解を招くものですか?
hadoop - YARN コンポーネント
とは
- ノード マネージャ
- 容器
- アプリマスター
YARN(Map Reduce 2.0)で?
https://hadoop.apache.org/docs/current2/hadoop-yarn/hadoop-yarn-site/YARN.html
また、上記のリンクの図の下のボックスにアプリケーション マスターがない理由を知りたいですか?
私はそれが何をするかではなく、それが何であるかを探しています!! ( => コンテナーがスプリング コンテナー (jar ファイルのリストを意味する) のような意味なのか、それとも Web サーバーのようなそのサーバーの意味なのかわかりません。アプリケーション マスターは単に Java クラスを意味するのでしょうか?)