問題タブ [cloudera-manager]

Ubuntu 12.04 LTS (64 ビット) で Cloudera Manager を使用して CDH5 をインストールしようとしています。Cloudera リンクに記載されている手順に従っていました。CDH5 をインストールするための正しいホスト名を指定できませんでした。/etc/hosts ファイルに 127.0.0.1 と 127.0.1.1 以外のエントリはありません。

インターネットへのアクセスに USB ドングルを使用していますが、現在イーサネット接続がありません。PC に CDH5 をインストールするためにイーサネット接続が必要かどうか教えてください。

PS 私は現在、メインフレーム開発者として働いており、Linux またはオープン ソースのバックグラウンドはありません。Udacity の Hadoop 入門コースの演習に取り組めるように、自分のマシンに CDH5 をインストールするのに 40 時間近く費やしました。 . したがって、ubuntuのデュアルブートパーティションにCDH5をインストールする以外に選択肢はありませんでした。さらに先に進むように案内してください。

現在、Cloudera を使用する前に、どのようにインストールして構成できるかを学ぼうとしています。

そこで、VirtualBox、Ubuntu 14.04、Cloudera Manager にインストールします。疑似シングルノード（自分のコンピューターのみ：クラスターなし）で試してみたいと思います。

なんとか取り付け完了。次に、CDH クラスター インストールのホストを指定します。ローカルホスト 127.0.0.1

私の問題は、「SSH ログイン資格情報の提供」にあります。ステップ

Cloudera パッケージをインストールするには、ホストへの root アクセスが必要です。このインストーラーは SSH 経由でホストに接続し、root として直接ログインするか、パスワードなしの sudo/pbrun 権限を持つ別のユーザーとしてログインして root になります。次のようにすべてのホストにログイン: root

上記で選択したユーザーのパスワードまたは公開鍵認証を介して接続できます。認証方法: すべてのホストが同じパスワードを受け入れる パスワードを
入力してください:************
SSH ポート: 22

次に、続行ボタンがこれにつながります

すべてのホストでインストールが失敗しました。インストールに失敗しました。認証に失敗しました。

「使用可能な認証方法が使い果たされました」

rootパスワードをリセットしようとしましたが、変更されませんでした..パスワードなしの権限を持つ他のユーザーを使用しようとしました（正しく行ったかどうかはわかりません..しかし機能しませんでした）チュートリアルに従って公開鍵sshを使用しようとしましたこれ

しかし、id_rsa.pub のパスを参照できません... Cloudera Manager には /.ssh/ にアクセスする権限がないためです :(

このステップの背後にあるものを完全には理解していないと思いますが、合格するためのチュートリアルはありません。これを構成するための解決策はありますか?

アドバイスをありがとう。

Cloudera Manager 5 を備えた CDH 5.2 があります。

nameservice2 から nameservice1 にデータをコピーしたい

両方のクラスターが同じ CDH バージョン上にある

私が試したときhadoop distcp hdfs://nameservice2/foo/bar hdfs://nameservice1/bar/foo

エラーが出ました

java.lang.IllegalArgumentException: java.net.UnknownHostException: nameservice2

そこで、Nameservice2 から Nameservice1 に次の構成を追加しました。

Cloudera マネージャー (ゲートウェイの既定のグループ) の hdfs-site.xml の HDFS クライアントの高度な構成スニペット (安全弁)

しかし、私はまだ同じエラーが発生しています。

この回避策はありますか？

ありがとう

Cloudera クラスターで、YARN クライアント モードで分散 Spark アプリケーションを起動しています。しばらくすると、Cloudera Manager にいくつかのエラーが表示されます。一部のエグゼキュータは切断され、これは体系的に発生します。問題をデバッグしたいのですが、内部例外が YARN によって報告されません。

例外のスタックトレースを確認するにはどうすればよいですか? YARN は、アプリケーションが異常終了したことだけを報告しているようです。YARN 構成で spark executor ログを表示する方法はありますか?

クラスターで Cloudera Manager を使用して、AD で Kerberos をセットアップしようとしています。ユーザー名とパスワードを指定した後のステップで、ldap_sasl_bind (-1) エラーのエラーが発生します。すべてのノードで AD の設定を行いました。まだ機能していません。

SSH から ldapsearch コマンドを試してみたところ、驚くほど正常に動作しています。したがって、ノードのセットアップは正しいです。そこには何も必要ありません。おもう。

Cloudera Manager ログを使用してさらにデバッグしたところ、ldapsearch コマンドに「ldap://:636」が含まれていることがわかりました。/usr/share/cmf/bin/import_credentials.sh で使用されている AD_SERVER パラメータに何も表示されません。

1. 私の証明書は正しくインポートされました。
2. 私の証明書の件名は有効です。
3. 管理権限を持つ有効なユーザーがいます。

私は何が欠けていますか？

ありがとう、BS

Cloudera Manager ( http://www.cloudera.com/content/cloudera/en/documentation/cdh5/v5-1-x/CDH5-High-Availability-Guide/cdh5hag_hdfs_ha_software_config. html )

私は連合 HDFS 構成を持っているので、異なる名前空間に対応する複数の名前ノードがあります。これらの名前ノードは、クラスター内の異なる物理ノードでホストされます。HA を構成するために、これらの異なる名前ノードのそれぞれに対応するスタンバイ名ノードをセットアップしようとしています。

次のような構成があるとします (NN = NameNode、SNN = StandbyNameNode):

アクティブ NameNode: NN1、NN2、NN3 スタンバイ NameNode: SNN1、SNN2、SNN3

クラスターに 3 つの物理ノードがあるとします。Cloudera Manager では、アクティブなネームノードとスタンバイのネームノード (別のアクティブなネームノード用) を同じ物理ホストでホストできますか?

次の構成はサポートされますか? ノード 1: NN1 と SNN3 ノード 2: NN2 と SNN1 ノード 3: NN3 と SNN2

ご回答ありがとうございます。

メール アラートが Cloudera Manager から間違ったメール アドレスに送信されている問題を追跡しようとしています。Cloudera UI の [アラート: メール メッセージの受信者] の下にある電子メール アドレスを修正し、クラスター全体を数回再起動しましたが、メッセージは以前の間違ったアドレスに送信されたままです。これらのアラートが通過するチェーンの詳細を誰か教えてもらえますか?