問題タブ [apache-crunch]

クランチジョブを実行するアプリケーションがあります。Java アクションを使用してこのジョブを実行するように Oozie を構成しようとしています。私の行動は以下のとおりです。

しかし、Oozie ジョブを実行するたびに、ジョブがスローされます。

キューをランチャーに設定しましたが、oozie はこの属性を使用しません。

内部マップ削減ジョブであるクランチ ジョブを実行していることに注意してください。

Apache Crunchについて勉強中です。私の知る限り、crunch は map-reduce フレームワークに基づく抽象化フレームワークです。map-reduce フレームワークの代わりに crunch を使用するつもりです。

私の質問は、 map-reduce は実行できますが、crunch は実行できないジョブはどれですか?

私はいくつか (約 12 個) の MapReduce タスクを実装しており、それぞれが単純な bash スクリプトによって実行されるワークフローの一部として機能します。さまざまな理由から、ワークフローを Apache Crunch に移行したいと考えています。

ただし、MapReduce タスクを再実装せずに Crunch 関数として実行する方法は明確ではありません。Map と Reduce の実装を Crunch 関数として使用する簡単な方法はありますか? MapReduce タスクをスタンドアロンでも Crunch ワークフローの一部としても実行できるように、ツールの実装も維持したいと考えています。これを行う方法はありますか？

洞察をありがとう。

Apache Crunch パイプラインに実装された MapReduce ジョブが失敗し、エラー メッセージが表示されますError injecting constructor, javax.xml.bind.JAXBException: property "retainReferenceToInfo" is not supported。

Crunch パイプラインは、他の機能するパイプラインと非常によく似ています。以下に見られるエラーについて、誰かが理論や直感を持っていますか?

助けてくれてありがとう。

アプリケーション ログの抜粋を以下に示します。