私は初めてでipyparallel
、このパッケージを使用して、機械学習アプリケーションで並列コンピューティングを実装したいと考えています。
以下は のテストです。 func.py ファイルで名前がipyparallel
付けられた関数を定義し、add
test.py ファイルで main 関数を定義します。
func.py のコードは次のとおりです。
#!/usr/bin/env python
# coding=utf-8
def add(*numbers):
numbers = list(numbers)
for i, n in enumerate(numbers):
numbers[i] = n + 1
return numbers
test.py のコードは次のとおりです。
#!/usr/bin/env python
# coding=utf-8
from func import add
from ipyparallel import Client
if __name__ == '__main__':
rc = Client(
'/home/fit/.ipython/profile_default/security/ipcontroller-client.json')
print map(add, [1, 2, 3]
print rc[0].map_sync(add, [1, 2, 3, 4])
エラーなしで実行できることがわかっているためmap
、 runmap_sync
の場合、コマンドラインは次を返します。
☁ test python test.py
[[2], [3], [4]]
Traceback (most recent call last):
File "test.py", line 14, in <module>
print rc[0].map_sync(add, [1, 2, 3, 4])
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/view.py", line 353, in map_sync
return self.map(f,*sequences,**kwargs)
File "<string>", line 2, in map
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/view.py", line 54, in sync_results
ret = f(self, *args, **kwargs)
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/view.py", line 618, in map
return pf.map(*sequences)
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/remotefunction.py", line 268, in map
ret = self(*sequences)
File "<string>", line 2, in __call__
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/remotefunction.py", line 75, in sync_view_results
return f(self, *args, **kwargs)
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/remotefunction.py", line 251, in __call__
return r.get()
File "/usr/local/lib/python2.7/dist-packages/ipyparallel/client/asyncresult.py", line 104, in get
raise self._exception
ipyparallel.error.CompositeError: one or more exceptions from call to method: add
[0:apply]: ImportError: No module named func
そして、test.py ファイルで関数を定義すると、以下map_sync
を実行できます。
#!/usr/bin/env python
# coding=utf-8
#from func import add
from ipyparallel import Client
def add(*numbers):
numbers = list(numbers)
for i, n in enumerate(numbers):
numbers[i] = n + 1
return numbers
if __name__ == '__main__':
rc = Client(
'/home/fit/.ipython/profile_default/security/ipcontroller-client.json')
print map(add, [1, 2, 3])
print rc[0].map_sync(add, [1, 2, 3, 4])
結果は次のとおりです。
☁ test python test.py
[[2], [3], [4]]
[[2], [3], [4], [5]]
map_sync
他のファイルで定義された関数をどのように使用するのだろうか? そして、これらの関数をインポートする方法は? from py_file import func
では機能しませmap_sync
ん。