問題タブ [spark-structured-streaming]

質問する

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

1999 問題
Newest
Active
Bountied
318
Unanswered
0 投票する
2 に答える
7781 参照

java - Javaで構造化ストリーミングを使用してKafkaからレコードを逆シリアル化する方法は?

私は Spark 2.1を使用しています。

Spark Structured Streaming を使用して Kafka からレコードを読み取り、逆シリアル化し、後で集計を適用しようとしています。

次のコードがあります。

valueとしてキャストするのではなく、フィールドをオブジェクトに逆シリアル化する必要がありますString。

これにはカスタムのデシリアライザーがあります。

Javaでこれを行うにはどうすればよいですか?

私が見つけた唯一の関連リンクはこれですhttps://databricks.com/blog/2017/04/26/processing-data-in-apache-kafka-with-structured-streaming-in-apache-spark-2-2 .htmlですが、これは Scala 用です。


12345678910