問題タブ [ambari]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - YARN 上の Oozie - Oozie は Hadoop の偽装を許可されていません
Java の Oozie を使用して、Hadoop クラスターでジョブを開始しようとしています。Hadoop 1 での Oozie の使用経験は非常に限られているため、YARN で同じことを試すのに苦労しています。
クラスターに属していないマシンが与えられたので、ジョブを開始しようとすると、次の例外が発生します。
それはなぜですか?
設定が必要なコアサイトのプロパティについて少し読みました
これが問題だと思われますか?クラスターの担当者に連絡して修正する必要がありますか?
Hadoop 1 で使用したのと同じコードを YARN に使用しているため、問題が発生する可能性はありますか? 何かを変更する必要がありますか?たとえば、workflow.xml で nameNode と jobTracker を設定していますが、現在は ResourceManager があるため、jobTracker が存在する必要がありますか? ResourceManager のアドレスを設定しましたが、プロパティ名を jobTracker のままにしました。これはエラーでしょうか?
たぶん、アンバリが使用されていることにも言及する必要があります...
hadoop - ambari Hadoop のインストール中に許可が拒否されました (publickey、gssapi-keyex、gssapi-with-mic、password)
ambari を使用して Hadoop クラスターをデプロイしようとしていますが、FQDN でホスト名を選択して構成に進むと、ssh のアクセス許可拒否エラーが発生します。
手順: 1. ssh-keygen をルートとして使用して rsa キーを生成します。
- .ssh(700)およびauthorized_keys(640)のパーミッションを変更
- 公開鍵をauthorized_keysにcatします。
- 公開鍵をすべてのホスト (authorized_keys) にコピーし、上記のようにファイルのアクセス許可を変更しました。
- ambari サーバー ホストから他のすべてのホストにパスワードなしで ssh できました。
しかし、ambari は以下のエラーで Hadoop のインストールに失敗しています。
この質問を重複としてマークしないでください。同じ説明の他の質問を見ることができましたが、Ambari ssh アクセス許可が拒否されたというエラーについて言及しているものはありませんでした。
hadoop - HDP クラスターはどのようにディスク パーティションを定義しますか?
HDP クラスターをインストールするとき、次の手順を使用してディスク パーティションを定義する方法について、Hortonworks のベスト プラクティスを使用しようとしました。
スタックのインストールに Ambari 2.0 を使用しています。Hadoop のデフォルトのインストール パスは/hadoop/xxx
です。の代わりに上記のリンクのベスト プラクティスを使用するように Ambari に指示する方法はあり/hadoop
ますか? そうでない場合、手動で行う最善の方法は何ですか?
hadoop - HDP なしで ambari を使用して Hadoop を統合する方法は?
Apache Hadoop 2.0.7 を使用する Hadoop クラスターがあります。
HDP (HortonWorks) なしで Ambari を Apache Hadoop と統合する方法を知りたいです。
実際、HDP を使用すれば、解決策は簡単です。しかし、私は自分の状況では使用したくありません。
何かアイデアはありますか?
hadoop - ambari マネージャーから core-site と hdfs-site の場所を取得する
Ambari マネージャーが使用している core-site.xml と hdfs-site.xml の場所を見つける必要があります。
私の最初の考えは、これを行うために Ambari API にクエリを実行することですが、これら 2 つのファイルのいずれかへのパスを返すエンドポイントが見つかりません。
誰かが私を正しい方向に向けることができますか? 私は、Ambari のドキュメントや Google 検索を調べてみましたが、役に立ちませんでした。
前もって感謝します!!
〜ドリュー
rest - ambari クラスター HDFS DISK USAGE METRICS を取得する方法
Amari UI メトリックを取得しようとしています。誰かが知っている場合は返信してください。
たとえば、以下の Rest API を呼び出すと、JSON で ambari メトリックを取得します。
ここで、メトリック名は次のようになります: cpu 、 network 、 memory 、 load ..
- cpu : クラスターの CPU 使用率を確認するには
- network : クラスターのネットワーク使用率を確認します
- memory : クラスタのメモリ使用率を確認します
- load : クラスタの負荷使用率を確認します
例えば :
上記の Rest API を呼び出すと、ネットワーク使用状況データが JSON で取得されます。
上記と同じように、 を取得する方法が知りたいのですHDFS DISK USAGE METRICS DATA
が、誰かが知っている場合は、私を助けてください。