問題タブ [distcp]

distcp ジョブを送信して、セキュリティで保護されていない Hadoop クラスターからセキュリティで保護された (kerberized) クラスターにファイルをコピーすると、次のエラーが発生しました。

メッセージが広すぎるのでError writing request body to server、何を掘り下げるべきか手がかりが得られません。ここに何かヒントはありますか?

参考までに、保護されたクラスターで mapreduce pi の例をテストしたところ、正常に動作しました。

distcp次のコマンドを実行して、HDFS から S3 にファイルをコピーしようとしています。

しかし、次のエラーが発生します。

HDFS に次のフォルダーがあります。

各フォルダーには 50 近くのファイルが含まれています。私の意図は、HDFS から S3 にコピーするときに、フォルダー内のすべてのファイルをマージして単一のファイルを取得することです。私が抱えている問題は、groupByオプションを使用した正規表現にあります。これを試しましたが、うまくいかないようです:

コマンド自体は機能しますが、各フォルダー内のファイルが単一のファイルにマージされないため、問題は正規表現にあると思われます。