hadoop-yarn - marklogic コンテンツ ポンプ ヤーンのサポート

Question

mlcp.shcdh5.2.4 で分散モードで実行しています。ジョブは常にローカルで実行され、糸/リソース マネージャーには送信されません。の実装mlcpに成功した人はいcdh5+ますか?

marklogic-contentpump-1.0.5.jar を使用しています

 bin/mlcp.sh export 
-host xxx.xx.xx.xxx 
-port xxxx 
-username <user> 
-password xxxxx 
-output_type sequence 
-compress_type record 
-output_file_path /tmp 
-mode distributed 
-job_queue cp11 
-query_type unfiltered 
-max_split_size 500 
-query_config file.properties 
-after_ts 2015-01-01T16:55:05-04:00 
-before_ts 2015-04-10T17:55:37-04:00  
-perm_path /data/mlcp

Answer 1

client-0.20 から client for yarn に変更したら修正されました

hadoop-client パッケージで提供される JAR ファイルの使用/usr/lib/hadoop/client-0.20(MRv1 API の場合) または/usr/lib/hadoop/client(YARN の場合) で提供されるすべての JAR ファイルをプロジェクトに追加してください。

たとえば、次の場所を JVM クラスパスに追加できます。

$ export CLASSPATH=/usr/lib/hadoop/client-0.20/\*