問題タブ [apache-kudu]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
1144 参照

impala - impala-shellを使用してkuduでテーブルを作成できません

Hadoop、Hive、Impala、および kudu の研究開発を行っていました。インストールされた HADOOP、HIVE、IMPALA、および KUDU サーバー。

--kudu_master_hosts=: を /etc/default -> impala ファイルに設定しました。つまり、以下のように:

============== その後、サーバーを再起動しました。次に、Kudu JAVA クライアントを使用して、kudu にテーブルを作成し、いくつかのレコードを挿入することができました。

次に、これを実行して同じテーブルを impala にマップします。

impala の kudu テーブルに正常にアクセスでき、すべてのレコードを表示できます。今、impala-shell を使用して KUDU でテーブルを作成しようとしていました。

しかし、これはエラーを出しています:

何が起こっているのか、このエラーの解決策は何かを説明してもらえますか。

KUDU のドキュメントを読みますが、アイデアが得られません。

よろしく、アクシャイ

0 投票する
1 に答える
595 参照

apache-spark - Spark ストリーミングを使用して Kafka から Kudu にデータを挿入する方法

Kafka トピックをリッスンする Spark ストリーミング アプリケーションがあります。データを取得したら、それを処理して Kudu に送信する必要があります。現在org.apache.kudu.spark.kudu.KuduContext API、データフレームで挿入アクションを使用して呼び出しています。collect()データからデータ フレームを作成するには、sqlContext を使用してデータ フレームを作成できるように呼び出す必要があります。

データフレームを作成する/データをKuduに挿入する方法はありcollect()ますか?もちろんコストがかかりますか?

Spark 1.6 を使用しています