0

私はいくつか (約 12 個) の MapReduce タスクを実装しており、それぞれが単純な bash スクリプトによって実行されるワークフローの一部として機能します。さまざまな理由から、ワークフローを Apache Crunch に移行したいと考えています。

ただし、MapReduce タスクを再実装せずに Crunch 関数として実行する方法は明確ではありません。Map と Reduce の実装を Crunch 関数として使用する簡単な方法はありますか? MapReduce タスクをスタンドアロンでも Crunch ワークフローの一部としても実行できるように、ツールの実装も維持したいと考えています。これを行う方法はありますか?

洞察をありがとう。

4

1 に答える 1

0

これに出くわす可能性のある人のために、Crunch ライブラリに最低限文書化された API があります。ただし、それはかなり簡単です。

ここを参照してください: https://crunch.apache.org/apidocs/0.10.0/org/apache/crunch/lib/Mapreduce.html

于 2016-01-26T22:04:16.537 に答える