巨大なデータをソートするためにデータセットで実行する条件のリストがあります。
df = A Huge_dataframe.
例えば。
Index D1 D2 D3 D5 D6
0 8 5 0 False True
1 45 35 0 True False
2 35 10 1 False True
3 40 5 2 True False
4 12 10 5 False False
5 18 15 13 False True
6 25 15 5 True False
7 35 10 11 False True
8 95 50 0 False False
指定された順序に基づいて df の上で並べ替える必要があります。
orders = [[A, B],[D, ~E, B], [~C, ~A], [~C, A]...]
#(where A, B, C , D, E are the conditions)
例えば。
A = df['D1'].le(50)
B = df['D2'].ge(5)
C = df['D3'].ne(0)
D = df['D1'].ne(False)
E = df['D1'].ne(True)
# In the real scenario, I have 64 such conditions to be run on 5 million records.
例えば。結果の出力を得るには、これらすべての条件を実行する必要があります。
次のタスクを達成する最も簡単な方法は、for loop
またはmap
またはを使用してそれらを注文すること.apply
ですか?
df = df.loc[A & B]
df = df.loc[D & ~E & B]
df = df.loc[~C & ~A]
df = df.loc[~C & A]
結果の df は、期待される出力になります。
multiple conditions
ここで、リストに保存されているものを実行したい場合、ループ、マップ、または.applyをどのように使用するかを知りたいと思っています。結果の出力ではありません。
そのような:
for i in orders:
df = df[all(i)] # I am not able to implement this logic for each order