apache-spark - 実行中の Spark ジョブが UI に表示されない

Question

パラメータまたはパラメータbin/spark-submit --class DataSet BasicSparkJob-assembly-1.0.jarについて言及せずに、ここで述べたようにスパークジョブを送信しました。そのジョブの代わりに、私の 3 ノード Spark クラスターに送信されます。しかし、ジョブに情報が表示されていないため、どこにジョブを送信したのか疑問に思っていました--masterspark.masterRunning Applications

Answer 1

--masterマスターを設定しない場合、spark.masterSpark はローカルで実行されます。

ジョブの進行状況を引き続き表示できます。デフォルトでは、UI は Spark ジョブの実行中に利用できますhttp://localhost:4040。

ジョブが終了すると、この UI は強制終了され、Spark 履歴サーバーを構成しない限り、アプリケーションの履歴を表示できませんでした