問題タブ [apache-whirr]

AWS インスタンスを Apache Whirr で自動的に実行します。次に、このインスタンスに ssh で接続したいと思いました。接続するにはキー ペアが必要です。

AWS コンソールに移動したところ、このインスタンス用に新しいキー ペアが作成されていることがわかりました。Whirr で自動的に展開したため、.pem ファイルをダウンロードする可能性はありませんでした。

キーペアを今すぐ取得する方法はありますか? インスタンスを作成する特定のキー ペアで Whirr をポイントする方法はありますか?

ありがとうございました。

Whirr をインストールし、EC2 クラスターを作成しました。クラスターが正しく作成され、ノードに ssh して、Hadoop が正しく機能していることを確認できます。ただし、hadoop-proxy.sh を使用しようとすると、次のメッセージが表示されます。

HDFS を別のシェルで表示しようとすると (以前に HADOOP_CONF_DIR 変数を構成しました)、次のエラーが発生します。

CDH を使用せずにクラスターをセットアップするときに、さまざまなプロパティ ファイルを試してみましたが、同じエラーが引き続き発生します。これは、Whirr でクラスターを起動するために現在使用しているプロパティ ファイルです。

私は Whirr が初めてで、何かが足りないと思います...しかし、これを解決する方法がわかりません。どんな助けでも大歓迎です。前もって感謝します。

Amazon EC2 で whirr を使用して Yarn 2.2.0 を構成しようとしています。しかし、私はいくつかの問題を抱えています。yarn 2.2.0 をサポートするように whirr サービスを修正しました。その結果、ジョブを開始して正常に実行できます。ただし、仕事の進捗状況を追跡する際に問題に直面しています。

問題はApplicationMasterにあります。ホスト名と rpc ポートがあり、ホスト名は、Amazon ネットワーク内からのみ解決できる内部ホスト名です。理想的には、パブリック Amazon DN 名である必要があります。しかし、私はまだそれを設定できませんでした。のようなパラメータを設定してみました

yarn.nodemanager.hostname yarn.nodemanager.address

しかし、ApplicationMaster のホスト名またはポートに変更を見つけることができませんでした。それらはまだプライベート amazon 内部ホスト名です。私は何かが欠けていますか？または、ノード マネージャがパブリック アドレスで始まるように、すべてのノード マネージャ ノードの /etc/hosts を変更する必要があります。進行状況をリモートで追跡できること

ジョブをリモートで送信する必要があるため、これをすべて行っています。この機能を妥協するつもりはありません。私を案内してくれる人は誰でも

historyserver の設定に成功し、リモート クライアントからアクセスできるようになりました。構成を使用してそれを行いました。

mapreduce.jobhistory.webapp.address

デバッグすると、

プライベート アドレスが原因で、プロキシが接続に失敗しました。上記の抜粋されたコードは ClientServiceDelegate からのものです

以下は私のプロパティファイルとエラーです。どうすれば解決できますか? ありがとう

以下は私のエラーです：

Druid Web サイトhttp://druid.io/docs/latest/Booting-a-production-cluster.htmlの手順に従って、Whirr を使用して Druid クラスターを起動しようとしています。

クラスターはインスタンス化されていますが、さまざまな Druid ノード (overlord、middleManager、ヒストリカル、およびコーディネーター) で次のエラーが発生し、一部の依存関係をダウンロードすると失敗します。

io.druid.extensions:druid-s3-extensions:jar:0.6.115 で依存関係を収集できませんでした

誰かが同様の問題に直面したか、それを解決する方法を知っていましたか?