Flume 1.5 は、圧縮ファイルを hdfs シンクに処理/転送できます。私はblobdeserializerとcompressedstreamとコーデックをgzipとして試しました。私が使用した設定オプションは次のとおりです
agent1.sources.c1.deserializer =org.apache.flume.sink.solr.morphline.BlobDeserializer$Builder
agent1.sinks.c1s1.hdfs.fileType = CompressedStream
agent1.sinks.c1s1.hdfs.writeFormat = Text
agent1.sinks.c1s1.hdfs.filePrefix = %{file}
agent1.sinks.c1s1.hdfs.codeC = gzip
agent1.sinks.c1s1.hdfs.serializer.compressionCodec = gzip