問題タブ [cloudera-manager]

以前に同様の質問を投稿しましたが、その 質問に対する回答 は役に立ちませんでした。

cloudera を使用して、AWS に 3 ノードの Hadoop クラスターをセットアップしたいと考えています。これらのクラスターをステップ実行するためのステップバイステップガイドがあるいくつかのリンクを参照しました。

リンク1

リンク2

これらのリンクはすべて、前述の手順を試しましたが、これらのインストールが完了したため、インスタンス格納ベースのインスタンスです。これらのインスタンスを停止するオプションはありません。1 つのインストールは (rebbot/terminate) のオプションのみで完了します。また、最初に 3 つの EBS ベースのインスタンスを起動してから、そのうちの 1 つをインストールしてから、このようにインストールしながら他の 2 つのインスタンスを追加しようとしました。しかし、他の 2 つのインスタンスがこのデータ ノードとして検出されず、他にどのような方法を使用すればよいかわかりません。この点に関する回答は本当に役に立ちます。

ツイートを HDFS に保存するために Apache Flume を使用しようとしています。現在、Hadoop と Flume で Cloudera イメージを使用しています。Cloudera のブログのチュートリアルに従っていましたが、Twitter API に接続できません。

次のエラーが表示されます:

Twitter API 資格情報を Flume.conf にコピーしました (ディスクと Web UI の両方で試しました)。また、それらを再生成して新しいものをコピーしようとしましたが、役に立ちませんでした。

私のpom.xmlには以下が含まれています：

つまり、ここで説明されている問題は発生しないはずです。

また、コマンドでシステム時刻を設定しました：

何が間違っている可能性があるかについて誰かが考えていますか? ご提案やご協力をいただき、誠にありがとうございます。

完全に機能する Cloudera Manager (CM) がインストールされた 64 ビット マシン 6 台の小さなクラスターがあります。32 ビット マシンのセットをデータノードとしてこのクラスターに追加したいと考えています。CM doc によると、マネージャーで 32 ビット マシンをインストールすることはできません。一方、これらの 32 ビット マシンに CDH4 を手動でインストールすることはできます。とにかく、すべてのマシンを一緒に接続できますか?

3+1 クラスターに Cloudera Manager と CDH4.2.2 を使用しています。cloudera manager でインストールを開始すると、自動的に JDK1.6 をダウンロードしてインストールします。私は便宜上、CDH で JDK1.7 を使用したいと考えています。クラスタに Hadoop をインストールしているときに、JDK1.7 で Hadoop を自動的にダウンロードしてインストールし、正常に実行する CDH のバージョンはありますか?

はいの場合、CDH のバージョンとダウンロード先を教えてください。

CDH に Apache Giraph をインストールしたいので、1.6 ではなく JDK1.7 を使用したいのですが、Giraph は JDK1.6 にうまく適合せず、JDK1.7 が必要なようです。

よろしくお願いします。