0

Flumeを介してTwitterデータをhbaseにシンクしようとしています.Flumeプロセスは以下の情報で停止しました

15/08/04 10:11:59 INFO lifecycle.LifecycleSupervisor: Stopping lifecycle supervisor 10

これは私のflume.confです

#source
###############################################################
TwitterAgent.sources = Twitter
TwitterAgent.channels = MemChannel
TwitterAgent.sinks = HbaseOut

TwitterAgent.sources.Twitter.type=MyTwitterSourceForFlume
TwitterAgent.sources.Twitter.channels = MemChannel
###############################################################
#chennal
###############################################################
TwitterAgent.channels.MemChannel.type = memory
TwitterAgent.channels.MemChannel.capacity = 10000
TwitterAgent.channels.MemChannel.transactionCapacity = 100
###############################################################
# HBase sink config
###############################################################
TwitterAgent.sinks.HbaseOut.type = org.apache.flume.sink.hbase.AsyncHBaseSink
TwitterAgent.sinks.HbaseOut.channel =MemChannel
TwitterAgent.sinks.HbaseOut.table=Fallowers_table
TwitterAgent.sinks.HbaseOut.columnFamily=Fallowers_det
TwitterAgent.sinks.HbaseOut.batchSize = 5000
TwitterAgent.sinks.HbaseOut.serializer = TwitterSplittingSerializer

Flume.conf に設定上の問題はありますか? またはhbaseシリアライザーの問題?

では、これをデバッグするにはどうすればよいですか?

4

0 に答える 0