python - リモートサーバーから100万行を読み取り/書き込みする最も効率的な方法は何ですか？

Question

SQLAlchemyとPythonを使用してリモートサーバーから数百万行を読み取り/書き込みするための効率的な方法（OUT OF MEMORYエラーを回避するため）を誰かに教えてもらえますか？

ありがとう、

Answer 1

データを読み取るときに結果セットを反復処理して、実際に処理する前にデータセット全体をメモリにプルするのではなく、一度に 1 つの行のみを処理するようにします。

そして書くために、同じことをしてください。効率を高めるために、一度に 1 つのレコードで作業してください。