1

私は NIFI の初心者です。私の使用例は、ポートから読み取り、寄木細工形式で hdfs に書き込むことです。私の調査によると、KiteSDK と呼ばれるものがあり、これを使用して Parquet 形式で保存できます。よろしいですか?アドバイスをお願いします。どんな例でも役に立ちます。

4

2 に答える 2

0

これを行うには、NiFi のPutParquet プロセッサを使用できます。(「フィルタ入力フィールド」に PutParquet と入力します: の下のハイパーリンクProcessors。)

于 2017-11-14T12:07:49.550 に答える
0

確かに、Apache NiFi で利用できるプロセッサがあり、道をたどるのに役立ちます。ListenTCP は、ソケットからデータをキャプチャできます。データの種類によっては、一部の変換プロセッサを潜在的に使用して変換できます。出力形式としての Parquet が直接サポートされているかどうかは不明です。もちろん、HDFS への配信もサポートされています。欠落している部分については、apache コミュニティで JIRA を作成するか、コントリビューションを提出するか、おそらく ExecuteScript を使用してインライン スクリプトを記述することができます。たくさんのオプション。

ありがとうジョー

于 2016-05-11T18:29:45.320 に答える