apache-kafka - Gobblin Kafka から HDFS へ: 同じファイルに追加

Question

Gobblin を使用して、Kafka から HDFS の同じファイルに新しいメッセージを追加する方法はありますか? これで、Kafka から読み取るたびに新しいファイルが作成されます。例えば毎分Gobblinジョブを実行すると、ファイルが大量に発生します。

助けてください！

Answer 1

Gobblin についてはわかりませんが、IMHO Apache Flumeの方が適しています。