問題タブ [pathos]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
python - pathos: 並列処理オプション - 誰かが違いを説明できますか?
Python(ubuntu)で並列プロセスを実行しようとしています。
マルチプロセッシングを使い始めたところ、単純な例ではうまくいきました。
その後、ピクルエラーが発生したため、パトスに切り替えました。さまざまなオプションに少し混乱したので、非常に単純なベンチマーク コードを作成しました。
約
- プレーン シリアル コードで 0.001 秒、パラレルなし、
-multiprocessing
オプションで0.100 秒、 - で 0.100 秒、 -
で 4.470
秒pathos.multiprocessing
、
- でエラーpathos.pools
AssertionError
pathos.parallel
これらのさまざまなオプションの使用方法をhttp://trac.mystic.cacr.caltech.edu/project/pathos/browser/pathos/examples.htmlからコピーしました
このような単純な例では、並列処理は単純なシリアル コードよりも長くなることがわかります。私が理解していないのは、パトスの相対的なパフォーマンスです。
ディスカッションをチェックしましたがpathos.pools
、なぜそんなに長くなるのか、なぜエラーが発生するのか理解できませんでした (最後のオプションのパフォーマンスがどうなるかわかりません)。
私も単純な二乗関数を試してみましたが、そのためにpathos.multiprocessing
はよりもはるかに長いですmultiprocessing
誰かがこれらのさまざまなオプションの違いを説明できますか?
さらに、pathos.multiprocessing
centOS を実行しているリモート コンピューターでオプションを実行しましたが、パフォーマンスは の約10 倍悪くなりmultiprocessing
ました。
コンピューターをレンタルしている会社によると、自宅のコンピューターと同じように機能するはずです。マシンの詳細がわからないと情報を提供するのは難しいかもしれませんが、それがどこから来たのかについてのアイデアがあれば、それは役に立ちます.