Google App EngineがGoogleドライブまたはクラウドストレージとの間の大きなファイル(たとえば、2GBを超えるサイズのテキストファイル)の読み取りと書き込みをサポートしているかどうか疑問に思いましたか?
どのような問題が予想されますか?
ちなみに私はPython2,7Google AppEngineSDKを使用しています。
更新。
Googleのデータストア(または新しいNDB)から最大100万行のデータを読み取り、データをテキストファイルに保存して、GoogleCloudComputeまたはPiCloudなどのサードパーティサービスでさらに処理する予定です。
データは基本的にネットワーク関係であり、次のようになります。
A -> B
B -> C
A -> D
上記は、AがBにリンクされ、BがCにリンクされ、AがDにリンクされていることを意味します。
私は100万を超えるエッジを持っているので、これを行うにはタスクキューまたはcronジョブを使用する必要があると思いますか?
したがって、関係を処理した後、ノードの各ペア間のスコアを含む別のテキストファイルが作成され、データベースに書き戻されます。
よろしくお願いします。