私のアプリは、オブジェクトのフィールドをディスクに保存して、後で簡単に再度ロードできるようにする必要があります。現在、オブジェクト全体をピクルして gzip でファイルを圧縮していますが、ファイルはまだ巨大で (配列のためだと思います)、保存するよりも時間がかかります。配列をより適切に保存する方法はありますか? それともまったく別のアプローチですか？
cPickle は速度を向上させないようです。そして、配列を格納するために HDF5 h5py を調べましたが、すべてをまとめておきたいと思います。このような問題に取り組むのはこれが初めてなので、解決策の適切な組み合わせがあればありがたいです。