問題タブ [spark-submit]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
java - スパーク送信java.lang.NullPointerExceptionエラー
Windows で spark を使用して spark-mongo コード jar を送信しようとしています。spark をスタンドアロン モードで使用しています。同じマシンでスパーク マスターと 2 つのワーカーを構成しました。1 つのマスターと 2 つのワーカーで jar を実行したいです。次のコマンドを実行しようとしています。spark-submit --master spark://localhost:7077 --deploy-mode cluster --executor-memory 5G --class spark.mongohadoop.testing3 G:\sparkmon1.jar
次のエラーに直面しています:
私はすでにenvにwinutilパスを設定しています。このエラーが発生する理由と解決策は何ですか?
java - Spark + Kafka ストリーミング NoClassDefFoundError kafka/serializer/StringDecoder
カフカ プロデューサーからメッセージを送信し、スパーク ストリーミングでストリーミングしようとしています。しかし、spark submit でアプリケーションを実行すると、次のエラーが発生します。
エラー
アプリケーションコードは次のとおりです。
Main.java
Pom.xml
このエラーの解決策が見つかりませんでした。どんな助けでも大歓迎です。