問題タブ [cloudera-manager]

マシンの再起動後に Cloudera クラスターを開始しようとしていますが、サーバーを起動していません。

cloudera-scm-server ログで以下のエラーを取得:

db-data フォルダーの権限を 700 に変更しようとしましたが、このリンクに従って SCHEMA_VERSION テーブルも削除しました が、うまくいきませんでした

編集

/var/log/cloudera-scm-server/db.log の DB ログで、次の致命的なエラーが発生しました。

Cloudera Manager インストーラー (cdh 5.3) を使用して、単純な 2 ノード クラスターをインストールしました。すべてがうまくいくようです。

次に、各ノードを AMI として保存しました。

次に、各イメージのインスタンスを再度起動し、NIC が元のクラスターと同じ (プライベート) サブネットにあり、同じセキュリティ グループを使用していることを確認しました。

ノードは互いに ping を実行できますが、Cloudera マネージャーはノードを見つけることができないようです。(「ハートビートが受信されていません」)。

IP または FQDN を使用してクラスターに新しいノードを追加しようとすると、ノードが既に管理されていることがわかります。また、クラスター/から削除/削除できないようです...

ここで重要な何かが欠けていますか?

Cloudera Manager から Hadoop メトリックに基づいて電子メール アラートを受信できるプロセスを設定する必要があります。たとえば、特定のサービスが停止したり、10 個を超えるデータノードがブラックリストに登録されたりするなどです。CM バージョン 5.1 でこれを達成するには、どのような方法が最適でしょうか?

CDH 5.2 を使用しています。spark-shellを使用してコマンドを実行できます。

1. spark コマンドを含むファイル (file.spark) を実行するにはどうすればよいですか。
2. sbt なしで CDH 5.2 で scala プログラムを実行/コンパイルする方法はありますか?

Cloudera クラスターで HBase を使用しようとしています。HBase はエラーなしで稼働していますが、HBase シェルに入って新しいテーブルを作成しようとすると、次のようになります。

次のエラーが表示されます。

Cloudera Manager は、HBase クラスターの正常性に関する問題を通知しません。とにかく、Cloudera Manager で HBase ログを確認すると、次のようなエラーが多数見つかります。

または：

クラスターの何が問題になっていますか?

CentOS のクラスターに新しいホストを追加しようとしました。インストールに失敗し、「インストールに失敗しました。ルート権限の検出に失敗しました」というステータスが表示されます。Cloudera にはパスワードなしの権限を持つユーザーが必要であることを知っています (「Cloudera パッケージをインストールするには、ホストへの root アクセスが必要です。このインストーラーは SSH 経由でホストに接続し、root として直接、またはパスワードなしの sudo を使用して別のユーザーとしてログインします。 /pbrun 権限で root になります。") どうすればそれを達成できますか？/etc/sudoers ファイルを編集しようとしました。編集：sudoersファイルに、次の行を追加しました：

cdh ALL=(ALL): ALL #cdh は私のユーザー名です

「ルート」の権限が定義されている場所のすぐ下。

しかし、インストールはこれ以上成功しません。詳細ウィンドウには、次のように表示されます。

どんな種類の助けも高く評価されます。

YARN 設定で何を変更する必要があるか教えてください。Hadoop ストリーミング MR ジョブ (Python スクリプト) を実行しようとすると、このエラーが発生し続けます。:Container is running beyond physical memory limits. Current usage: 3.0 GB of 3 GB physical memory used; 4.2 GB of 6.3 GB virtual memory used. Killing container.

ここで何が間違っているか教えてください

私の設定：