問題タブ [low-memory]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
python - PyTorch で「CUDA のメモリ不足」を回避する方法
これは、GPU メモリが少ない PyTorch ユーザーにとってかなり一般的なメッセージだと思います。
授業でオブジェクト検出アルゴリズムを研究したいと考えています。また、多くのディープ ラーニング アーキテクチャは大容量の GPU メモリを必要とするため、私のマシンではそれらのモデルをトレーニングできません。各レイヤーを GPU にロードしてからロードし直すことで、画像を処理しようとしました。
しかし、あまり効果がないようです。GPU メモリをほとんど使用せずに大規模なディープ ラーニング モデルをトレーニングするためのヒントやコツはあるのでしょうか。前もって感謝します!
編集:私は深層学習の初心者です。ダミーの質問でしたら申し訳ありません:)
python - それぞれ約 5M のツイートを含む 3 つの大きなツイート データフレーム (csv) ファイルを連結するにはどうすればよいですか?
ツイートの 3 つの csv データフレームがあり、それぞれが約 5M のツイートです。それらを連結するための次のコードは、メモリ不足エラーで存在します。私のマシンには32GBのメモリがあります。パンダでこのタスクにより多くのメモリを割り当てるにはどうすればよいですか?
エラーは次のとおりです。
更新:回答の提案を試してもエラーが発生します