Mac OS (Mac Pro 12 Core) でローカルに実行される Spark ジョブ (map/reduce バリアント) である長時間実行タスクがあります。time コマンドは以下を返しました。
./run 278.74s user 83.56s system 0% cpu 13:50:45.69 total
これは、ジョブがほとんどの時間を IO の待機に費やしたことを意味しますか?
Mac OS (Mac Pro 12 Core) でローカルに実行される Spark ジョブ (map/reduce バリアント) である長時間実行タスクがあります。time コマンドは以下を返しました。
./run 278.74s user 83.56s system 0% cpu 13:50:45.69 total
これは、ジョブがほとんどの時間を IO の待機に費やしたことを意味しますか?