ipython-parallel - AWS スポット インスタンスと ipcluster プラグイン

Question

現在、AWS が 1 つ以上のスポット インスタンス ノードをシャットダウンすると、 ipcluster プラグインは何をしますか? これらのノードを再起動して IPython クラスターに再度追加するメカニズムはありますか?

Answer 1

クラスターをスケーリングするには、loadbalance コマンドを使用する必要があります。常に x ノードが必要であることがわかっている場合は、「--max_nodes x --min_nodes x」で起動するだけで、ノードがなくなるとすぐにノードを追加しようとします。

ノードがなくなった場合、それはおそらくスポット価格市場の変動が原因であるため、それらが再び表示される前に SPOT_BID 値を下回るまで待つ必要がある場合があります。

SGE プラグインでロード バランサーをよく使用しますが、ipcluster で試したことがないため、どの程度動作するかわかりません。