google-cloud-storage - gsutilと大量のアップロード

Question

何千もの「小さな」ファイル（gsutil -m cp -R -q / dir / * gs：//bucket_name）を含む大きなディレクトリ（1TB）をアップロードしようとしています。しかし、数時間後、CPU使用率が100％に急上昇し、ネットワークトラフィックが恒久的に0に低下するのを見ることができます。md5sumであるランダムファイルの「アップロードを再開するためにmd5に追いつく」で立ち往生しているようです。1秒もかからないはずです。

Answer 1

現在、この問題は gsutil リリース 3.18 で修正されています。次を実行して取得できます。

gsutil の更新

このアップデートを適用した後も引き続き問題が発生する場合は、お知らせください。