セキュリティで保護されていない HDFS クラスターから kerberized クラスターにファイルを転送したいと考えていました。distcp を使用してファイルを転送しています。次のコマンドを使用しました。
hadoop distcp -D ipc.client.fallback-to-simple-auth-allowed=true hdfs://<ip>:8020/<sourcedir> hdfs://<ip>:8020/<destinationdir>
kerberized クラスターで上記のコマンドを実行した後、次のエラーが発生します。
java.io.EOFException: End of File Exception between local host is: "<xxx>"; destination host is: "<yyy>; : java.io.EOFException; For more details see: http://wiki.apache.org/hadoop/EOFException