問題タブ [cloudera-manager]

Cloudera は初めてです。Cloudera Manager にホストを追加しようとしていますが、次のエラーで失敗します

インストールに失敗しました。エージェントからハートビートを受信できませんでした。

1. ホストのホスト名が正しく構成されていることを確認してください。

2. Cloudera Manager Server でポート 7182 にアクセスできることを確認します (ファイアウォール ルールを確認してください)。

3. 追加するホストでポート 9000 および 9001 が使用されていないことを確認します。

4. 追加するホストの /var/log/cloudera-scm-agent/ でエージェント ログを確認します。(一部のログはインストールの詳細にあります)。

5. Cloudera Manager で [エージェントに TLS 暗号化を使用] が有効になっている場合 ([管理] -> [設定] -> [セキュリティ])、追加するホストで /etc/cloudera-scm-agent/config.ini に use_tls=1 があることを確認します。対応するエージェントを再起動し、ここで [再試行] リンクをクリックします。

ubuntu ベースの Google クラウド VM で実行されている docker コンテナーで cloudera-quickstart-vm ( https://github.com/caioquirino/docker-cloudera-quickstart ) を実行しています。IP が docker IP であるポート 172.17.xx.1:7180 で PuTTY を使用して、cloudera マネージャーへのトンネルを作成します。ブラウザーで localhost:7180 としてアクセスします。この同じ IP は、新しいホストを追加する最初のステップでホスト名として解決されます。

コンテナーで「ホスト名」コマンドを実行すると、コンテナー ID (例: 0cb223fcfe64) が取得されます。これをホスト名として追加しようとすると、「ホストに接続できませんでした」というメッセージが表示されます

これらのエラーを解決して新しいホストを追加するにはどうすればよいですか?

stackoverflow および cloudera フォーラムで他の同様の投稿を確認しましたが、解決策はどれもうまくいきませんでした。さらに情報が必要な場合はお知らせください。詳細を提供できるよう努めます。

どんな助けでも大歓迎です。

HDP 2.3 クラスターを kerbrized し、キャッシュに有効な TGT を持っています。

beeline コンソールからクエリを正常に実行できます。たとえば、次のようなことがうまくいきます。

次を使用して同じクエリを実行しようとしています（ファイル：query.sqlに配置されています）が機能しません

この問題の理由がわかりません。どちらの場合も、同じ jdbc URL を使用しています。何かが足りないかどうかわかりません。

私はビッグ データと Hadoop の初心者です。hello world コンテンツを含む test というファイルを作成しました。これを試してみると、ファイル ブラウザーにアップロードしたいと思っていました。エラーが発生しました。この Web サイトで回答を検索して解決しようとしました。問題はクラスター「cloudera manager」にあることがわかりました。これを開こうとすると、10 RAM を使用することを強く推奨するメッセージが表示されますが、強制的に開きたい場合はコマンド「force」を使用してください。システムをダウンロードすることをお勧めしました 8 グラムの RAM バス 私は仮想マシンに 5.5 グラムの RAM を与えました。システムを柔軟に使用できるので、何が問題なのか、どうすれば Cloudera Manager を強制的に起動できますか?

Cloudera ディストリビューションは、Horton Works ディストリビューションが Windows で同じ目的で Ambari を使用しているのと同様に、クラスターでの自動インストールおよびメンテナンス アクティビティに cloudera manager を使用しています。

誰でも私を明確にしてください、私はWindows 7がインストールされた4GBのRamラップトップしか持っていません。現在、VMwareでApache分散hadoop1.xを使用しています。ClouderaマネージャーでCloudera分散Hadoopを練習したいのですが、インストール方法を教えてください。 Redhat linux 6がインストールされた2GB RAMに割り当てられたVMWAREでcloudera managerを使用してclouderaをインストールすることは可能ですか？

前もって感謝します。

システム (14.04/64b) にCloudera Managerをインストールしています。

最後のステップでインストール中に、インストールを完了する前に、以下に示すように検証でいくつかのエラーが発生しました。

上記ページのエラーは、

1. エラー 1

   個々のホストは、自身のホスト名を正しく解決しました。

   ホスト localhost の名前は localhost であると予想されていましたが、(InetAddress.getLocalHost().getHostName()) 自体が aul-pc に解決されました。

2. エラー 2

   /etc/hosts のチェック中に次のエラーが見つかりました...

   • ホスト名 localhost は、localhost の /etc/hosts のアドレス 127.0.0.1 に最初に一致するものではありません。代わりに、arul-pc が最初に一致します。FQDN は、対応する IP の /etc/hosts の最初のエントリである必要があります。
   • localhost の /etc/hosts に、IP 127.0.0.1 が複数回存在します。特定の IP は 1 回だけリストする必要があります。

これらの 2 つのエラーを解決するにはどうすればよいですか?

注(情報)::

私の/etc/hosts中で、

注2（私の試み）::

arul-pc私はasから避けようとし/etc/hosts/ました、

保存して再度実行すると、エラー 2 はクリアされましたが、エラー 1 は次のようになりました。

個々のホストは、自身のホスト名を正しく解決しました。

ホスト localhost は、次のエラーで InetAddress.getLocalHost() を実行できませんでした: aul-pc: aul-pc。これは通常、ホスト名を解決できなかったことを意味します。

Cloudera Manager 5.5.1 を使用して、CentOS 6.6 を実行している 3 ノード クラスターで新しいインストールを試みていますが、「選択した区画のインストール」という名前の手順 7 で、次のエラーが表示されます。

何が問題なのかわからないのですが、これが既知の問題かどうか教えてもらえますか?

さらに調査すると、ログ scm-agent.log に次のエラーが表示されます。

Cloudera Quickstart VM の理解に問題があります。これまでの私の手順の概要を説明してみましょう。

1. Web サービスに接続してデータ フィードを取り込むために、Kafka を使用して何かを記述したいと考えています。
2. Cloudera 5.5 クイックスタート VM をプレイグラウンドとして使用します。
3. Kafka を取得するには、区画から CDH をインストールする必要があります。https://community.cloudera.com/t5/Apache-Hadoop-Concepts-and/cloudera-manager-5-4-0-installing-kafka-parcel-fails/td-p/30615経由
4. Cloudera VM のデスクトップに気の利いた「Migrate to Parcels」アイコンが表示されたので、それをクリックして終了させました。

5. Cloudera サービスを起動しようとすると、以下のすべてが表示されます -

   /li>

後で、「top」コマンドを実行したときにプロセスが実行されているのが明らかにわかりません。他に何をすればいいですか？

以下は、CM で報告された健康問題のスナップショットです。リスト内のデータノードは変化し続けます。datanode ログからのいくつかのエラー:

スナップショット:

問題の根本原因を突き止めることができません。あるデータノードから別のデータノードに問題なく手動で接続できます。ネットワークの問題ではないと思います。また、不足しているブロックとレプリケートされていないブロックの数も (上下に) 変化します。

Cloudera マネージャー: Cloudera 標準 4.8.1

CDH4.7

この問題を解決するための助けをいただければ幸いです。

更新: 2016 年 1 月 1 日

不良としてリストされているデータノードについて、dadanode のログを見ると、このメッセージが頻繁に表示されます...

このデータノードが他のデータノードから同時に多くのブロックを受信して​​いるのはなぜですか? このアクティビティが原因で、datanode が namenode リクエストに時間内に応答できず、タイムアウトになったようです。すべての不良データノードは同じパターンを示します。

Cloudera Manager を使用して Hadoop クラスターにホストを配置しようとしています。

これに使用する 2 台のコンピューターは次のとおりです。

マネージャーは、GUI の「クラスターへのホストの追加」シナリオの「クラスターのインストール」部分で問題を抱えています。

マネージャが Cloudera Manager Server を検出しようとすると、次のエラーが表示されます。

次のリンクでChelouteが指示するようにしようとしましたが、問題が解決していないようです. ポスターとは別のエラーもありました。 クラウデラ マネージャー。Cloudera Manager サーバーの検出に失敗しました

コマンドラインで次を使用すると、エラーは発生しません。

python -c 'インポートソケット; システムをインポートします。s = socket.socket(socket.AF_INET); s.settimeout(5.0); s.connect((sys.argv[1], int(sys.argv[2]))); s.close();' 10.10.10.10 7182

ただし、Cloudera Manager でこれを修正する方法がよくわかりません。