問題タブ [gobblin]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
1 に答える
427 参照

hadoop - Dataproc で Gobblin を実行しようとすると NoSuchMethodError が発生する

Google Dataproc でGobblinを実行しようとしていますが、この NoSuchMethodError が発生し、解決方法がわかりません。

この同じジョブ (以下の内容) は、ローカルの Hadoop セットアップ (ラップトップ) では適切に実行されますが、dataproc では実行されません。Dataproc で Gobblin を実行しようとしたことがありますか?

ここに私のゴブリンジョブファイルがあります:

これらは、dataproc に対して発行するコマンドです。

/usr/lib/hadoop/libDataprocクラスタのすべてのマシンですべての gobblins lib jar を内部にコピーしようとしましたが、どちらもうまくいきませんでした。

何か案は?

0 投票する
1 に答える
313 参照

hadoop - カミュかゴブリンどっちがいい

Kafka から HDFS にメッセージを保存するための camus または gobblin の設定を手伝ってくれませんか。実際の例は素晴らしいかもしれません。

ゴブリンはまだインキュベーション段階にあり、カミュは段階的に廃止されています。したがって、どちらを使用するのが好ましいですか。

gobblin をダウンロードして gobblin-standalone.sh start を実行しましたが、エラーが発生しました

環境変数 GOBBLIN_JOB_CONFIG_DIR が設定されていません! .