問題タブ [distcp]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
666 参照

hadoop - 2 つの Hdfs ディレクトリ (別々のクラスター) 間で distcp を使用してファイル (カンマ区切り) を distcp することは可能ですか?

distcp x 個のファイルのみが必要です。

それを行う方法が見つかりませんでした。

  1. 1 つのアイデアは、一時ディレクトリにコピーしてから、そのディレクトリをdistcpすることです。完了したら、その一時ディレクトリを削除できます。

  2. 個々の distcp コマンド (ファイルごと)。これは苦痛かもしれません。

カンマ区切りが許可されているかどうかは不明です。

何か案は?

前もって感謝します。

0 投票する
0 に答える
137 参照

amazon-s3 - Google Cloud ストレージから AWS S3 へのデータ転送

Google Cloud Storageデータを からに転送しAWS S3distcpEMRます (これを実現するために、 にいくつかの構成変更を加えましEMRた)。データ転送は安全ですか? そうでない場合、他のオプションは何ですか?