2

2 つの異なるHadoopクラスター間でdistcpコマンドを実行しているときに問題に直面しています。

原因: java.io.IOException: source:hdfs://ip1/xxxxxxxxxx/xxxxx と target:hdfs://nameservice1/xxxxxx/.distcp.tmp.attempt_1483200922993_0056_m_000011_2 の長さが一致しません

-pb と -skipcrccheck を使用してみました:

hadoop distcp -pb -skipcrccheck -update hdfs://ip1/xxxxxxxxxx/xxxxx hdfs:///xxxxxxxxxxxx/ 

hadoop distcp -pb  hdfs://ip1/xxxxxxxxxx/xxxxx hdfs:///xxxxxxxxxxxx/ 

hadoop distcp -skipcrccheck -update hdfs://ip1/xxxxxxxxxx/xxxxx hdfs:///xxxxxxxxxxxx/ 

しかし、何も機能していないようです。

解決策をお願いします。

4

3 に答える 3