約100000 * 10kbの大量のデータを扱っています。それらをリストに入れるにはどうすればよいですか? メモリが 1 GB 未満の場合はどうすればよいですか? これは私の例です。うまくいくかどうかわかりません。
def get_lots_of_data():
datas = []
for i in range(100000):
d= find_a_big_data_from_file_by_item(i) #every item is about 10kb
datas.append(d)
return datas
このデータを適切に保存するにはどうすればよいですか?