1

2250 個のパーティションを持つテーブルでハイブ クエリを実行していますが、このエラーが発生しています。どのタスクが超過しているのか、どのように修正すればよいのかわかりません。ありがとう、

Hive 履歴ファイル=/tmp/hadoop/hive_job_log_hadoop_201310040052_1692176679.txt 合計 MapReduce ジョブ = 2 起動ジョブ 1/2 削減タスクの数が指定されていません。入力データサイズからの推定: 10 レデューサーの平均負荷 (バイト単位) を変更するには: set hive.exec.reducers.bytes.per.reducer= レデューサーの最大数を制限するには: hive.exec を設定します。 reducers.max= レデューサーの定数を設定するには: set mapred.reduce.tasks= org.apache.hadoop.ipc.RemoteException: java.io.IOException: java.io.IOException: The number of tasks for this job 31497 は、sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:

4

1 に答える 1