圧縮された CSV ファイルを指す公開 URL があります。
(実際には、各zipファイルが約250MB、非圧縮で1.6GBのURLが約100個あります)
このデータを CloudStorage に保存して BigQuery で処理できるようにしたいのですが、CS に再アップロードするためだけにこれを別のサーバーにダウンロードしたくないのは明らかです。
これは可能ですか?
圧縮された CSV ファイルを指す公開 URL があります。
(実際には、各zipファイルが約250MB、非圧縮で1.6GBのURLが約100個あります)
このデータを CloudStorage に保存して BigQuery で処理できるようにしたいのですが、CS に再アップロードするためだけにこれを別のサーバーにダウンロードしたくないのは明らかです。
これは可能ですか?