apache-spark - データサイズがメモリよりも大きい場合、PySpark は利点を提供しますか?

Question

大きすぎてメモリに完全にロードできないデータを扱う場合、PySpark は何らかの利点を提供しますか? これ (およびその他の機能) を IPy Parallel に基づくアプローチと比較しようとしています。