問題タブ [cloudera-cdh]

CDH4 (現在は 4.5) によって管理されるアプリケーション ログを格納するために HBase を使用していますが、cdh 4.6 (4.7 と同じ) にアップグレードした後、挿入が非常に遅くなります。クライアントがリージョンサーバーに接続していて、すぐに接続を閉じることがわかりました（CDh 4.5を使用しても同じ問題は発生していません）

RegionServer ログ:

クライアント接続クラス:

輸入：

HBase に位置 (緯度、経度) の値を格納しようとしています。キーと値のペアの HashMap から新しい値を取得するたびに、列を追加することにしました。私の HashMap は次のようなものです:

{lat:43.7719802, lon:-79.5008048} (Hashmap のサンプル JSON 表現)

そして、ここに私のコードがあります:

しかし、値を取得したい場合、それらは冗長に保存されます。次のように、値ごとに1つのセルに複数回接着されていることを意味します。

コードで HBase 0.94.15-cdh4.7.0 ライブラリを使用しています。

この問題を解決する手がかりを知っている人はいますか?

1 台のラップトップで 2 (または 3) ノード 3 CDH 4.1 クラスターを構成できた人はいますか?

ラップトップは WiFi 経由でインターネットに接続され、VM (VirtualBox、CentOS7) はブリッジ ネットワークを使用するように構成されています。各 VM には専用の IP アドレスがあり、相互に ping を実行したり、ホストに ping を実行したり、インターネットに接続したりできます。

これらのコマンドを使用してソフトウェアをインストールしました

ファイアウォールを無効にしたことがわかります。ただし、zookeeper.log で確認できます

どういうわけか、CDH はこの方法ではインストールできず、特にルーターや LAN などがあるエンタープライズ セットアップが必要な気がします。

CDH 4.1 を 1 台のラップトップと 2 台の VM にインストールできた人はいますか? Zookeeper サーバーを起動できましたか?

ここで私を助けてください。

たとえば、1 つのアプリケーションに 2 つの異なるメイン クラスがあるため、別のメイン クラスを作成して、ユーザーが呼び出し用のメイン クラスを選択できるようにしました。これは正常に機能します。

ただし、メイン クラスの 1 つについては、外部の -libjars パラメータを渡す必要があります。これが私の問題です。別のアプリケーションからアプリケーションを呼び出しているため、パラメーターを渡すことができません。ユーザーの好みに応じて、追加のパラメーターを JVM に渡す方法を知っていますか。

例えば：

主な用途:

アプリケーションを選択してください:

1) アプリ 1 2) アプリ 2

アプリ 1 には追加のパラメーターを渡す必要がないので、アプリ 2 には -libjar /../../some.jar を渡す必要があります (このパラメーターはアプリケーション内では使用されません。クラスター JVM )

どうすればいいですか？

これら 2 つのアプリを個別に呼び出す場合は、次のようにします。

app1 の場合:

糸の瓶 test.jar app1Main

アプリ 2 の場合:

ヤーン jar test.jar app2Main -libjars /../../some.jar

私はcdh5クイックスタートvmを使用しており、次のようなファイルがあります(ここでは完全ではありません):

そして、私はこのスクリプトを使用しました：

スクリプトは機能しますが、生成されたファイルは空です。

Cloudera Manager API を介して Mapreduce Jobtracker を再起動しようとしています。Jobtracker の統計は次のとおりです。

わからない API を使用して Jobtracker だけを再起動するにはどうすればよいですか?

次のコマンドを使用して Hive サービスを再起動しようとしましたが、エラーが発生しました

Cloudera Manager APIの使用方法を理解するのに誰かが助けてくれれば幸いです

Hbase リージョン サーバーは 127.0.0.1 でリッスンしています。0.0.0.0 でリストするにはどうすればよいですか? hbase.regionserver.info.bindAddress の値をチャニングしようとしましたが、うまくいかないようです。