大きなファイル (〜 150MB) をダウンロードし、データをより便利なテキスト形式のファイルに解析するプログラムを作成しています。ダウンロードのプロセス、特に解析が遅い (合計で ~ 20 分) ため、結果をキャッシュしたいと考えています。
ダウンロードの結果は一連のファイルであり、解析の結果は単一のファイルであるため、これらのファイルが存在するかどうかを手動で確認し、存在する場合はそれらの変更時刻を確認できます。ただし、コード内の他の場所で Web サービス呼び出しに redis バックエンドを備えた dogpile を既に使用しているため、dogpile をこれに使用できるかどうか疑問に思っていました。
だから私の質問は: 変更された時間に基づいてファイルをキャッシュするために dogpile を使用できますか?