8

その遅くておそらく愚かな部門は以下を提示します：

>>> import multiprocessing
>>> mgr = multiprocessing.Manager()
>>> d = mgr.dict()
>>> d.setdefault('foo', []).append({'bar': 'baz'})
>>> print d.items()
[('foo', [])]         <-- Where did the dict go?

一方：

>>> e = mgr.dict()
>>> e['foo'] = [{'bar': 'baz'}]
>>> print e.items()
[('foo', [{'bar': 'baz'}])]

バージョン：

>>> sys.version
'2.7.2+ (default, Jan 20 2012, 23:05:38) \n[GCC 4.6.2]'

バグまたはワグ？

編集：Python 3.2では、もっと同じです：

>>> sys.version
'3.2.2rc1 (default, Aug 14 2011, 21:09:07) \n[GCC 4.6.1]'

>>> e['foo'] = [{'bar': 'baz'}]
>>> print(e.items())
[('foo', [{'bar': 'baz'}])]

>>> id(type(e['foo']))
137341152
>>> id(type([]))
137341152

>>> e['foo'].append({'asdf': 'fdsa'})
>>> print(e.items())
[('foo', [{'bar': 'baz'}])]

dictプロキシのリストに追加の要素を含めないようにするにはどうすればよいですか？

4

3 に答える 3

9

これは非常に興味深い動作です。どのように機能するかは正確にはわかりませんが、動作がどのようになっているのかを説明します。

multiprocessing.Manager().dict()まず、それはではなくdict、DictProxyオブジェクトであることに注意してください。

>>> d = multiprocessing.Manager().dict()
>>> d
<DictProxy object, typeid 'dict' at 0x7fa2bbe8ea50>

DictProxyこのクラスの目的は、dictプロセス間で安全に共有できるを提供することです。つまり、通常のdict関数の上にロックを実装する必要があります。

明らかに、ここでの実装の一部は、の内部にネストされた可変オブジェクトに直接アクセスできないようにすることです。これが許可された場合、安全に使用できるDictProxyすべてのロックをバイパスする方法で共有オブジェクトを変更できるためです。DictProxy

これは、可変オブジェクトにアクセスできないという証拠です。これは、次の場合と同様ですsetdefault()。

>>> d['foo'] = []
>>> foo = d['foo']
>>> id(d['foo'])
140336914055536
>>> id(foo)
140336914056184

通常の辞書では、同じリストオブジェクトを指し示すことが期待d['foo']さfooれ、一方を変更するともう一方も変更されます。DictProxyご覧のとおり、マルチプロセッシングモジュールによって追加のプロセス安全要件が課せられるため、これはクラスには当てはまりません。

編集：マルチプロセッシングドキュメントからの次のメモは、私が上で言おうとしていたことを明確にしています。

注：プロキシは値またはアイテムがいつ変更されたかを知る方法がないため、dictおよびlistプロキシの可変値またはアイテムへの変更はマネージャーを介して伝播されません。このようなアイテムを変更するには、変更したオブジェクトをコンテナプロキシに再割り当てします。

# create a list proxy and append a mutable object (a dictionary)
lproxy = manager.list()
lproxy.append({})
# now mutate the dictionary
d = lproxy[0]
d['a'] = 1
d['b'] = 2
# at this point, the changes to d are not yet synced, but by
# reassigning the dictionary, the proxy is notified of the change
lproxy[0] = d

上記の情報に基づいて、元のコードを書き直してDictProxy：で動作するようにする方法は次のとおりです。

# d.setdefault('foo', []).append({'bar': 'baz'})
d['foo'] = d.get('foo', []) + [{'bar': 'baz'}]

エドワード・ローパーがコメントで示唆したように、上記のコードを編集して、 get() の代わりに setdefault()使用しました。

于 2012-05-29T23:09:12.147 に答える
2

Manager（）。dict（）はDictProxyオブジェクトです。

>>> mgr.dict()
<DictProxy object, typeid 'dict' at 0x1007bab50>
>>> type(mgr.dict())
<class 'multiprocessing.managers.DictProxy'>

DictProxyはBaseProxyタイプのサブクラスであり、通常のdictのように完全に動作するわけではありません：http ：//docs.python.org/library/multiprocessing.html？highlight = multiprocessing＃multiprocessing.managers.BaseProxy

したがって、基本dictとは異なる方法でmgr.dict（）に対処する必要があるようです。

于 2012-05-29T23:01:48.920 に答える
0

items（）はコピーを返します。コピーに追加しても、オリジナルには影響しません。これですか？

>>> d['foo'] =({'bar': 'baz'})
>>> print d.items()
[('foo', {'bar': 'baz'})]
于 2012-05-29T23:00:26.833 に答える