問題タブ [spark-submit]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
1311 参照

java - スパーク送信java.lang.NullPointerExceptionエラー

Windows で spark を使用して spark-mongo コード jar を送信しようとしています。spark をスタンドアロン モードで使用しています。同じマシンでスパーク マスターと 2 つのワーカーを構成しました。1 つのマスターと 2 つのワーカーで jar を実行したいです。次のコマンドを実行しようとしています。spark-submit --master spark://localhost:7077 --deploy-mode cluster --executor-memory 5G --class spark.mongohadoop.testing3 G:\sparkmon1.jar

次のエラーに直面しています:

私はすでにenvにwinutilパスを設定しています。このエラーが発生する理由と解決策は何ですか?

0 投票する
3 に答える
4133 参照

java - Spark + Kafka ストリーミング NoClassDefFoundError kafka/serializer/StringDecoder

カフカ プロデューサーからメッセージを送信し、スパーク ストリーミングでストリーミングしようとしています。しかし、spark submit でアプリケーションを実行すると、次のエラーが発生します。

エラー

アプリケーションコードは次のとおりです。

Main.java

Pom.xml

このエラーの解決策が見つかりませんでした。どんな助けでも大歓迎です。