1

ここでは、次のように「大きな」dict を json にダンプします。

#!/usr/bin/env python
# -*- coding: utf-8 -*-

import simplejson as json

doc = {}
# appending the doc, so that the doc is more than 2G
.....

json_doc = json.dumps(doc)

次に、次のエラーメッセージが表示されました。

  File "C:\Python27\lib\site-packages\simplejson\__init__.py", line 286, in dump
s
    return _default_encoder.encode(obj)
  File "C:\Python27\lib\site-packages\simplejson\encoder.py", line 228, in encod
e
    chunks = list(chunks)
MemoryError

どうすれば修正できますか？ありがとう！

4

1 に答える 1

5

十分なメモリがほとんどない場合は、オブジェクトをjsonに段階的にエンコードしてみてください。

import json
import sys

d = dict.fromkeys(range(10))
for chunk in json.JSONEncoder().iterencode(d):
    print(chunk) # print each chunk on a newline for demonstration

出力を文字列に蓄積しないでください。ファイル/ソケットを使用して、チャンクをすぐに書き込み/送信してください。

出力

{
"0"
: 
null
, 
"1"
: 
null
, 
"2"
: 
null
, 
"3"
: 
null
, 
"4"
: 
null
, 
"5"
: 
null
, 
"6"
: 
null
, 
"7"
: 
null
, 
"8"
: 
null
, 
"9"
: 
null
}
于 2011-12-29T03:34:52.203 に答える