問題タブ [apache-hive]

質問する

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

96 問題
Newest
Active
Bountied
318
Unanswered
0 投票する
2 に答える
98 参照

hadoop - ハイブ結合クエリ

ハイブに 2 つのテーブルがあります:

テーブル 1:

表 2 :

テーブル 1 に存在しないテーブル 2 の新しいデータを Hive で取得する方法はありますか??

他のデータベース ツールでは、内側の左/右を使用します。しかし、Hiveには内側の左/右が存在せず、これをどのように達成できるかを提案していますか?

0 投票する
0 に答える
129 参照

hadoop - Hive: 分散モードのマスター ノードでクエリを実行中に実行エラーが発生しました

  1. クエリ ID = hdumer_20160523203816_0c2b2640-f711-41b9-81fd-5ee5d2af900a 合計ジョブ数 = 1 ジョブの起動 1 のうち 1 削減オペレーターがないため、削減タスクの数は 0 に設定されます ジョブはインプロセスで実行されています (ローカル Hadoop) 2016-05-23 20 :38:24,120 ステージ 1 マップ = 0%、削減 = 0% 2016-05-23 20:38:30,147 ステージ 1 マップ = 2%、削減 = 0% 2016-05-23 20:38:32,164 ステージ- 1 マップ = 5%、削減 = 0% 2016-05-23 20:38:35,193 ステージ 1 マップ = 8%、削減 = 0% 2016-05-23 20:38:38,209 ステージ 1 マップ = 11%、削減 = 0% 2016-05-23 20:38:40,218 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:38:46,242 ステージ 1 マップ = 16%、削減 = 0% 2016- 05-23 20:38:49,253 ステージ 1 マップ = 19%、削減 = 0% 2016-05-23 20:38:52,263 ステージ 1 マップ = 20%、削減 = 0% 2016-05-23 20:38 :55,272 ステージ 1 マップ = 22%、縮小 = 0% 2016-05-23 20:38:58、291 ステージ 1 マップ = 24%、削減 = 0% 2016-05-23 20:38:59,298 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:39:05,314 ステージ 1 マップ = 30%、削減 = 0% 2016-05-23 20:39:07,320 ステージ 1 マップ = 31%、削減 = 0% 2016-05-23 20:39:29,383 ステージ 1 マップ = 35%、削減 = 0 % 2016-05-23 20:39:32,390 ステージ 1 マップ = 38%、削減 = 0% 2016-05-23 20:39:35,398 ステージ 1 マップ = 40%、削減 = 0% 2016-05-23 20:39:38,404 ステージ 1 マップ = 42%、削減 = 0% 2016-05-23 20:39:39,407 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:39:45,416 ステージ-1 マップ = 49%、削減 = 0% 2016-05-23 20:39:48,423 ステージ 1 マップ = 50%、削減 = 0% 2016-05-23 20:39:51,430 ステージ 1 マップ = 53% 、削減 = 0% 2016-05-23 20:39:54,437 ステージ 1 マップ = 55%、削減 = 0% 2016-05-23 20:39:55,438 ステージ 1 マップ = 100%、削減 = 0% 2016 -05-23 20:40:01、450 ステージ 1 マップ = 61%、削減 = 0% 2016-05-23 20:40:04,455 ステージ 1 マップ = 64%、削減 = 0% 2016-05-23 20:40:07,464 ステージ 1 マップ = 66%、削減 = 0% 2016-05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0 % 2016-05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40:24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、取得中デバッグ情報... 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からのコード 2 を返しますCPU 消費時間: 0 ミリ秒削減 = 0% 2016-05-23 20:40:04,455 ステージ 1 マップ = 64%、削減 = 0% 2016-05-23 20:40:07,464 ステージ 1 マップ = 66%、削減 = 0% 2016- 05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016-05-23 20:40 :19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40:24,498 ステージ 1 マップ= 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からの戻りコード 2削減 = 0% 2016-05-23 20:40:04,455 ステージ 1 マップ = 64%、削減 = 0% 2016-05-23 20:40:07,464 ステージ 1 マップ = 66%、削減 = 0% 2016- 05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016-05-23 20:40 :19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40:24,498 ステージ 1 マップ= 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からの戻りコード 20ミリ秒0ミリ秒455 ステージ 1 マップ = 64%、削減 = 0% 2016-05-23 20:40:07,464 ステージ 1 マップ = 66%、削減 = 0% 2016-05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016-05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0 % 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40:24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive からコード 2 を返します。 ql.exec.mr.MapRedTask MapReduce ジョブの起動: Stage-Stage-1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0 FAIL MapReduce の合計 CPU 消費時間: 0 ミリ秒455 ステージ 1 マップ = 64%、削減 = 0% 2016-05-23 20:40:07,464 ステージ 1 マップ = 66%、削減 = 0% 2016-05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016-05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0 % 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40:24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive からコード 2 を返します。 ql.exec.mr.MapRedTask MapReduce ジョブの起動: Stage-Stage-1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0 FAIL MapReduce の合計 CPU 消費時間: 0 ミリ秒削減 = 0% 2016-05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016- 05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40 :24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラーが発生しました。デバッグ情報を取得しています。 .. 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からのリターン コード 2 ：0ミリ秒削減 = 0% 2016-05-23 20:40:10,472 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:16,482 ステージ 1 マップ = 75%、削減 = 0% 2016- 05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016-05-23 20:40 :24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり ジョブ中にエラーが発生しました。デバッグ情報を取得しています。 .. 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からのリターン コード 2 ：0ミリ秒削減 = 0% 2016-05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016- 05-23 20:40:24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり エラー中ジョブ、デバッグ情報の取得... 失敗: 実行エラー、戻りコード 2 から org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce ジョブが起動: ステージ-ステージ-1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0不合格 合計 MapReduce CPU 消費時間: 0 ミリ秒削減 = 0% 2016-05-23 20:40:19,487 ステージ 1 マップ = 78%、削減 = 0% 2016-05-23 20:40:22,493 ステージ 1 マップ = 79%、削減 = 0% 2016- 05-23 20:40:24,498 ステージ 1 マップ = 100%、削減 = 0% 2016-05-23 20:40:30,520 ステージ 1 マップ = 81%、削減 = 0% 終了ジョブ = job_local348040558_0001 エラーあり エラー中ジョブ、デバッグ情報の取得... 失敗: 実行エラー、戻りコード 2 から org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce ジョブが起動: ステージ-ステージ-1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0不合格 合計 MapReduce CPU 消費時間: 0 ミリ秒reduce = 0% 終了したジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からコード 2 を返します。ステージ 1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0 FAIL 合計 MapReduce CPU 消費時間: 0 ミリ秒reduce = 0% 終了したジョブ = job_local348040558_0001 エラーあり ジョブ中にエラー、デバッグ情報を取得中... 失敗: 実行エラー、org.apache.hadoop.hive.ql.exec.mr.MapRedTask からコード 2 を返します。ステージ 1: HDFS 読み取り: 8822964165 HDFS 書き込み: 0 FAIL 合計 MapReduce CPU 消費時間: 0 ミリ秒

2:ハイブ ログ ファイル;

2016-05-24 22:04:07,489 ERROR [main]: exec.Task (SessionState.java:printError(960)) - 終了したジョブ = job_local932151035_0001 エラー 2016-05-24 22:04:07,507 ERROR [Thread-65 ]: exec.Task (SessionState.java:printError(960)) - ジョブ中にエラーが発生し、デバッグ情報を取得しています... 2016-05-24 22:04:07,507 INFO [Thread-65]: Configuration.deprecation (Configuration.java :warnOnceIfDeprecated(1173)) - mapred.job.tracker は非推奨です。代わりに、mapreduce.jobtracker.address 2016-05-24 22:04:07,752 ERROR [main]: ql.Driver (SessionState.java:printError(960)) - FAILED: Execution Error, return code 2 from org.apache. を使用してください。 hadoop.hive.ql.exec.mr.MapRedTask 2016-05-24 22:04:07,752 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,752情報 [メイン]: ql.Driver (SessionState.java:printInfo(951)) - MapReduce ジョブが起動されました: 2016-05-24 22:04:07,753 情報 [メイン]: ql.Driver (SessionState.java:printInfo(951)) - ステージ-ステージ-1: HDFS 読み取り: 13499720788 HDFS 書き込み: 0 FAIL 2016-05-24 22 :04:07,753 情報 [メイン]: ql.Driver (SessionState.java:printInfo(951)) - 合計 MapReduce CPU 使用時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger ( PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - Stage-Stage-1: HDFS Read: 13499720788 HDFS Write: 0 FAIL 2016-05-24 22:04:07,753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 情報 [メイン]: exec.ListSinkOperator (オペレーター.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - Stage-Stage-1: HDFS Read: 13499720788 HDFS Write: 0 FAIL 2016-05-24 22:04:07,753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 情報 [メイン]: exec.ListSinkOperator (オペレーター.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - ドライバー (SessionState.java:printInfo(951)) - ステージ ステージ 1: HDFS 読み取り: 13499720788 HDFS 書き込み: 0 FAIL 2016-05-24 22:04:07,753 情報 [メイン]: ql.Driver (SessionState.java: printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - ドライバー (SessionState.java:printInfo(951)) - ステージ ステージ 1: HDFS 読み取り: 13499720788 HDFS 書き込み: 0 FAIL 2016-05-24 22:04:07,753 情報 [メイン]: ql.Driver (SessionState.java: printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 13499720788 HDFS 書き込み: 0 FAIL 2016-05-24 22:04:07,753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 情報 [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 13499720788 HDFS 書き込み: 0 FAIL 2016-05-24 22:04:07,753 INFO [main]: ql.Driver (SessionState.java:printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 情報 [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - printInfo(951)) - 合計 MapReduce CPU 消費時間: 0 ミリ秒 2016-05-24 22:04:07,753 情報 [メイン]: log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22: 04:07,753 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) - 07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(612)) - 3 終了しました。閉じる... 2016-05-24 22:04:07,764 INFO [メイン]: exec.ListSinkOperator (Operator.java:close(634)) - 3 終了 2016-05-24 22:04:07,765 INFO [メイン] : log.PerfLogger (PerfLogger.java:PerfLogBegin(121)) - 2016-05-24 22:04:07,765 INFO [メイン]: log.PerfLogger (PerfLogger.java:PerfLogEnd(148)) -

誰かがこの問題を解決するのを手伝ってくれませんか:)事前に感謝します

0 投票する
1 に答える
669 参照

hadoop - Hive の外部テーブル

  1. Rスクリプトを使用してHDFSにCSVファイルを追加しました。

  2. この CSV を新しい CSV/追加データで更新します

  3. この CSV で Hive の色相を使用してテーブルを作成しました。

  4. 外部テーブルに変更しました。

hdfs の場所でデータが変更された場合、データはハイブ テーブルで自動的に更新されますか?

0 投票する
0 に答える
169 参照

hive - Hive メタストアでスキーマの変更を追跡する方法はありますか?

新しいテーブルの作成、列の追加/削除、列タイプの変更など、Hive メタストア内のすべてのスキーマ変更を追跡するための解決策を探しています。メタ情報を格納する MySQL データベースを監視するだけでよいですか?

0 投票する
1 に答える
1788 参照

hive - Hive 1.2 での BINARY データ型の制限は?

BINARYApache ドキュメントでデータ型についてあまり見つけられませんでした: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types

BINARYを使用して列を持つテーブルを作成しました-

JDBC経由でメタデータを取得した後、私が見つけた、

columnSize:2147483647

これに関する公式文書はありますか？

0 投票する
1 に答える
1704 参照

hadoop - Hive の case ステートメントにデータを挿入する

Hive の case ステートメントに新しいデータ行を挿入することは可能ですか?

次のフィールド (team_id、fname、lname) を持つ基本的な「チーム」テーブルがあります。

これは私が実行しようとしているものです、

エラー ParseException line 2:29 Failed to recognize predicate 'insert'. Failed rule: 'identifier' in table or column identifier

誰かが情報や解決策を提供できれば、それは素晴らしいことです

Frostie

0 投票する
1 に答える
1237 参照

string - Apache Hive での変数値と文字列の連結

Apache Hive CLI または Beeline CLI では、変数の値を文字列と連結する必要があります。そうすることは可能ですか？

例: set path_on_hdfs="/apps/hive/warehouse/my_db.db";

「${hivevar:path_on_hdfs}/myTableName」のようなものを取得するには?

0 投票する
1 に答える
9226 参照

hadoop - Apache Hive - 単一挿入日付値

Hive を使用して日付列に日付を挿入しようとしています。これまでのところ、私が試したことは次のとおりです

と

と

しかし、私はまだ得る

また

ORC ベースのテーブルで Hive ACID が有効になっており、日付のない単純な挿入が機能しています。

本当に単純なものが欠けていると思います。しかし、指を置くことはできません。

0 投票する
0 に答える
378 参照

hive - ハイブで string を bigint にキャストすると不完全なデータが返される

ハイブで完全な値を取得するにはどうすればよいですか? つまりcast('0024' as bigint)、与えるだけですが、出力として24完全なものが必要です。0024

これを行う方法はありますか？


12345678910