私の会社では、古いマシンと新しいマシンの組み合わせを使用して、非常に異種の YARN + Spark クラスターをまとめました。個々のマシンの統計は大きく異なるため、より大きなマシンで複数のエグゼキュータを起動できるようにしたいと考えています。--num-executorsクラスタ内のマシン数よりも多い設定は機能しません。これを有効にするために変更する必要がある他の設定はありますか、それとも単に不可能ですか?
私の会社では、古いマシンと新しいマシンの組み合わせを使用して、非常に異種の YARN + Spark クラスターをまとめました。個々のマシンの統計は大きく異なるため、より大きなマシンで複数のエグゼキュータを起動できるようにしたいと考えています。--num-executorsクラスタ内のマシン数よりも多い設定は機能しません。これを有効にするために変更する必要がある他の設定はありますか、それとも単に不可能ですか?