問題タブ [apache-hudi]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
apache-spark - spark-submit エラー: java.util.NoSuchElementException: spark.scheduler.mode
Ubuntu 16.04 サーバーで Apache Hudi をセットアップしようとしています。レポhttps://github.com/apache/incubator-hudi.gitのクローンを作成し、次のようにビルドしました
ビルドは正常に完了しました。
次に、 https://hudi.incubator.apache.org/docker_demo.htmlに従ってテストを進めました。
実行しようとすると
出力を取得します
評判が不十分なため、質問に incubator-hudi タグを追加できませんでした。
手伝ってくれてありがとう
apache-spark - Apache Hudi を使用した Spark 構造化ストリーミング
構造化ストリーミングを使用してストリームを Hudi データセットに書き込む必要があるという要件があります。Apache Hudi Jiraの問題でこれを行うための規定があることがわかりましたが、誰かがこれをうまく実装しているかどうかを知りたいと思っていました. Spark 構造化ストリーミングを使用して、AWS Kinesis Firehose から Apache Hudi にデータを構造化しようとしています
迅速なヘルプをいただければ幸いです。
pyspark - Python/Pyspark で Apache Hudi を使用する
Pyspark 環境で Apache Hudi を使用した人はいますか? 可能であれば、利用可能なコード サンプルはありますか?