numpy でいくつかの異なるトリックを使用するより高速な方法がおそらくあります。numpy.indices
あなたが始めたいところです。itertools.product
と組み合わせると、本質的には と同等ですrollaxis
。この質問での Sven Marnach の回答は、これの優れた例です (ただし、最後の例には小さなエラーがありますが、これは使用したいものですnumpy.indices((len(some_list) + 1), * some_length...
。
ただし、このようなものについては、 itertools を使用すると読みやすくなる可能性があります。
numpy.fromiter
特にイテレータ内のアイテム数を指定する場合は、明示的にリストに変換するよりも少し高速です。主な利点は、使用するメモリが大幅に少なくなることです。これは、大きな反復子の場合に非常に役立ちます。
numpy.indices
イテレータをnumpy配列に変換するトリックとさまざまな方法の両方を使用した例を次に示します。
import itertools
import numpy as np
import scipy.special
def fixed_total_product(bins, num_items):
return itertools.ifilter(lambda combo: sum(combo) == num_items,
itertools.product(xrange(num_items + 1), repeat=bins))
def fixed_total_product_fromiter(bins, num_items):
size = scipy.special.binom(bins - 1 + num_items, num_items)
combinations = fixed_total_product(bins, num_items)
indicies = (idx for row in combinations for idx in row)
arr = np.fromiter(indicies, count=bins * int(size), dtype=np.int)
return arr.reshape(-1, bins)
def fixed_total_product_fromlist(bins, num_items):
return np.array(list(fixed_total_product(bins, num_items)), dtype=np.int)
def fixed_total_product_numpy(bins, num_items):
arr = np.rollaxis(np.indices((num_items + 1,) * bins), 0, bins + 1)
arr = arr.reshape(-1, bins)
arr = np.arange(num_items + 1)[arr]
sums = arr.sum(axis=1)
return arr[sums == num_items]
m, n = 5, 20
if __name__ == '__main__':
import timeit
list_time = timeit.timeit('fixed_total_product_fromlist(m, n)',
setup='from __main__ import fixed_total_product_fromlist, m, n',
number=1)
iter_time = timeit.timeit('fixed_total_product_fromiter(m, n)',
setup='from __main__ import fixed_total_product_fromiter, m, n',
number=1)
numpy_time = timeit.timeit('fixed_total_product_numpy(m, n)',
setup='from __main__ import fixed_total_product_numpy, m, n',
number=1)
print 'All combinations of {0} items drawn from a set of {1} items...'.format(m,n)
print ' Converting to a list and then an array: {0} sec'.format(list_time)
print ' Using fromiter: {0} sec'.format(iter_time)
print ' Using numpy.indices: {0} sec'.format(numpy_time)
タイミングについて:
All combinations of 5 items drawn from a set of 20 items...
Converting to a list and then an array: 2.75901389122 sec
Using fromiter: 2.10619592667 sec
Using numpy.indices: 1.44955015182 sec
それらのどれも特に高速ではないことに気付くでしょう。
ブルート フォース アルゴリズムを使用しています (考えられるすべての組み合わせを生成してから、それらをフィルター処理します)。ここで numpy ベースの例にコピーしています。
これを行うには、おそらくもっと効率的な方法があります。ただし、私は決してCSや数学の人ではないので、最初にすべての可能な組み合わせを生成せずにこれを行うためのよく知られたアルゴリズムがあるかどうかはわかりません...
とにかく頑張ってください!