問題タブ [sqoop]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
3 に答える
31914 参照

java - ubuntuのどこにjdbcドライバーをインストールしますか?

sqoopforHadoopで使用するMSSQLJDBCドライバーをubuntuにインストールしようとしています。私はJavaとLinuxにまったく慣れていないので、どこにすべてを抽出するのかわかりません。

0 投票する
2 に答える
1637 参照

hadoop - HDFS 上のフラット ファイルを大規模なデータベース テーブルと同期させるにはどうすればよいですか?

HDFS 上のフラット ファイルを、行の更新がある可能性がある大規模なデータベース テーブルと同期させる最善の方法は何ですか?

sqoop などのツールは、テーブルから新しい行を段階的に抽出できるので便利なように思えますが、行の更新を処理する簡単な方法がわかりません。

行の更新を効率的に処理するには、どのような手法を使用できますか? 毎晩テーブル全体をダンプすることは避けたいことです。

0 投票する
2 に答える
2185 参照

oracle - Sqoopでテーブルを作成するときにエラーが発生しました

「sqoopcreate-hive-table」を使用してHiveでテーブルスキーマを作成したいと思います。私のDBはOracleDatabase10g Enterprise Edition 10.2.0.4.0であり、sqoop-1.2.0-cdh3u0とhive-0.7.0-cdh3u0を使用しています。後でHiveテーブルにロードするデータはすでにHDFSにあります。手動で作成して後でデータをロードするよりも、sqoop&hiveによってテーブルメタデータを自動的に作成する方がよいでしょう。

これが私が実行するコマンドです:

そして、私は次のエラーを受け取ります:

11/05/12 11:33:11 INFO hive.HiveImport:アップロードされたデータをHiveにロードしています

11/05/12 11:33:12 INFO manager.OracleManager:タイムゾーンがGMTに設定されました11/05/12

11:33:12 INFO manager.SqlManager:SQLステートメントの実行:SELECTt。*FROM BFUNC1.R1_EVOLUTION t WHERE 1 = 0

11/05/12 11:33:14 INFO hive.HiveImport:Hive履歴ファイル= / tmp / edjatsay / hive_job_log_edjatsay_201105121133_1466429457.txt

11/05/12 11:33:14 INFO hive.HiveImport:FAILED:Parse Error:line 1:58不一致入力')'列指定に識別子が必要です

11/05/12 11:33:14 INFO hive.HiveImport:

11/05/12 11:33:14エラーtool.CreateHiveTableTool:テーブル作成ジョブの実行中にIOExceptionが発生しました:java.io.IOException:Hiveがステータス11で終了しました

DB内のテーブルのスキーマは次のとおりです。

よろしくお願いします。

0 投票する
7 に答える
11107 参照

hadoop - sqoopインポートは完了しましたが、hiveshowテーブルがテーブルを表示できません

hadoop、hive(CDHバージョン)をインストールした後、実行します

すべてうまくいきますが、ハイブコマンドラインに入ってshowtablesを実行しても何もありません。./hadoop fs -lsを使用すると、/ user /(username)/userが存在することがわかります。

どんな助けでも大歓迎です。

- -編集 - - - - - -

次の理由でインポートが失敗します:

0 投票する
3 に答える
4084 参照

hive - Sqoop コマンド --hive-import が失敗しました

Sqoop から " --hive-import " コマンドを使用して、テーブルを自動的に作成し、データをハイブにロードして、Hadoop で mysql から Hive にデータベースをインポートしようとしています。

以下のコマンドを使用して、sqoopでインポートを実行します

このコマンドを実行すると、このようにエラーが発生します

sqoop コマンドの何が問題になっていますか? または sqoop または hive に他の構成がありますか?

お願い助けて

0 投票する
1 に答える
550 参照

hadoop - Hadoop、Hive、および Sqoop を使用して MS SQL Server からデータを取得および分析する方法は?

データベース(MS SQL Server)にあるデータを分析したい。では、Sqoop/Hive を使用して、そのデータを HDFS に取り込むにはどうすればよいでしょうか? Hive/Sqoop で可能ですか? どうすればできるか教えてください。

ありがとう。

0 投票する
2 に答える
1195 参照

sqoop - SQOOPの設定に疑問

シナリオ:

PC で SQOOP を構成しました。しかし、bin/sqoop を使用すると、次のようなエラーが発生するという問題に直面しています。

エラー:

スレッド「メイン」での例外

質問:

何が問題なのですか?$HBASE_HOME と $ZOOKEEPER_HOME のパスも設定しました。どうすればできるか教えてください。

ありがとう。

0 投票する
4 に答える
2063 参照

hadoop - sqoopインポートクエリのエラー

シナリオ:

エラー:

質問:

Sqoopを正常に構成しましたが、何が問題になる可能性がありますか?IPアドレスを入力してデータベースに接続しようとしていますが、同じ問題があります。これらのエラーを削除するにはどうすればよいですか?plsは私に解決策を提案します。

ありがとう。

0 投票する
2 に答える
8479 参照

sqoop - sqoop のインポート中に、「varchar 値を JDBC データ型 DECIMAL に変換しています」というエラーが発生しました

シナリオ:

sqoop インポート クエリを入力すると、次のようになります。

エラー:

質問:

なぜそれが起こっているのですか?これを削除する解決策を提案してください。

ありがとう。