0

pig という名前のプロパティがあります

' pig.maxCombinedSplitSize ' – 1 つのマップで処理されるデータのサイズをバイト単位で指定します。より小さいファイルは、このサイズに達するまで結合されます。

単一のマップで処理されるデータのサイズを指定するためのハイブに同様のプロパティはありますか?

以下のコマンドを試していますが、うまくいきません。

'SET hive.maxCombinedSplitSize=64mb';

助言がありますか？

4

1 に答える 1

0

これを試して：

set hive.input.format=org.apache.hadoop.hive.ql.io.CombineHiveInputFormat;
set mapred.min.split.size=67108864;
于 2014-05-22T18:16:26.297 に答える