2

text_with_headers シリアライザー (HDFS シンク シリアライザー) を使用すると、Flume イベント ヘッダーを破棄せずに保存できます。出力形式は、ヘッダー、スペース、本文ペイロードで構成されます。本文を削除して、ヘッダーのみを保持したいと考えています。HBase シンクの場合、「RegexHbaseEventSerializer」を使用してイベントを変換できます。しかし、HDFS シンクのそのような規定を見つけることができません。

4

1 に答える 1

1

serializerプロパティをheader_and_textに設定すると、ヘッダーと本文の両方が出力されます。

例えば：

agent.sinks.my-hdfs-sink.type = hdfs
agent.sinks.my-hdfs-sink.hdfs.fileType = DataStream
... 
# very important
agent.sinks.my-hdfs-sink.serializer = header_and_text
于 2015-07-17T02:48:15.930 に答える