GCS からデータをロードするための推奨される方法は何ですか? サンプル コードは、GCS から/tmp/ディレクトリへのデータのコピーを示しています。これが提案されたアプローチである場合、どのくらいのデータを にコピーでき/tmp/ますか?
質問する
1468 次
1 に答える
4
そのオプションがある間は、データをローカル ディスクにコピーする必要はありません。GCS URI を使用してファイル/オブジェクトを参照することにより、トレーニングおよび評価データを GCS から直接参照できる必要があります。gs://bucket/path/to/file. これらのパスは、ファイル パスを受け入れる TensorFlow API で通常ローカル ファイル システム パスを使用する場所で使用できます。TensorFlow は、GCS へのデータ アクセス (および書き込み) 機能をサポートしています。
また、各ファイルを個別に参照するのではなく、プレフィックスを使用して一致するファイルのセットを参照できる必要があります。
補足メモ --トレーニングにアクセスできるようにデータを適切に ACL する必要がある場合は、https://cloud.google.com/ml/docs/how-tos/using-external-bucketsを確認してください。
それが役立つことを願っています。
于 2016-09-30T05:50:55.763 に答える