問題タブ [sqoop2]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
2 に答える
1307 参照

cloudera - sqoop2 ジョブを開始するための構文は何ですか?

私はsqoop2ジョブを設定しました。次のように開始しようとしています:

これは間違っているようです。ヘルプリストはコマンドとして始まるので、これを試しました:

も間違っているようです。

ここで正しい構文は何ですか?


PS:

0 投票する
5 に答える
4872 参照

hadoop - SQOOP テーブルをインポートできません

私はsqoopで以下のコマンドを実行しています

私のバージョンの sqoop : Sqoop 1.4.4.2.0.6.1-101
Hadoop -- Hadoop 2.2.0.2.0.6.0-101

どちらも hortonworks ディストリビューションから取得しました。HADOOP_HOME、HCAT_HOME、SQOOP_HOME などのすべてのパスが適切に設定されています。sqoop で list-database、list-tables コマンドを実行することで、mysql データベースからデータベースのリスト、テーブルのリストを取得できます。--query 'select * from widgets'; からデータを取得することもできます。しかし、 --table オプションを使用するとエラーが発生します。

0 投票する
1 に答える
354 参照

cloudera - Sqoop2 Avro サポート

sqoop クライアント引数は、次のように Avro 形式としてエクスポートをサポートします。

--as-avrodatafile+

しかし、Hue と Client Java API for Sqoop を調べてみると、TEXT_FILE と SEQUENCE_FILE しかサポートしていません。AVRO のサポートを有効にする方法と、その使用方法に関するドキュメントは? Avro は列名に基づいてスキーマを作成しますか?

0 投票する
2 に答える
452 参照

compiler-errors - Sqoop2: コンパイルに失敗しました: org.apache.sqoop:sqoop-core:test-jar:tests:2.0.0-SNAPSHOT がありません

最新の Sqoop2 をコンパイルすると、依存関係がないためにエラーが発生します。

org.apache.sqoop:sqoop-core:test-jar:tests:2.0.0-SNAPSHOT

このjarをインストールする方法は?

私は実行しています:

アパッチ Maven 3.2.1

Java バージョン: 1.7.0_51

CentOS 6.5、カーネル 2.6.32-431.5.1.el6.x86_64

0 投票する
2 に答える
1559 参照

maven - Sqoop2 をビルドするために必要な Maven のバージョン

ソースから Sqoop2 をビルドするのを手伝ってください。CentOS 6.5 で Maven 3.2.1 を使用しています。コマンドでSqoop2をコンパイルしようとすると:

次の結果として例外が発生します。

コマンドで Sqoop2 をビルドしようとすると:

次の結果として例外が発生します。

何か案は?

0 投票する
1 に答える
688 参照

hadoop2 - Mysql から hdfs にデータをインポート中にエラーが発生しました

3 つのノードと sqoop 2 がインストールされた Hadoop 2.2.0 クラスターがあります。sqoop サーバーを起動すると、次の例外が発生します。

原因は何ですか?

0 投票する
1 に答える
4679 参照

hadoop - Sqoop が import job コマンドの --query パラメータを認識しない

mssql サーバーからハイブにデータをエクスポートしようとしています。次のコマンドを使用して、Users テーブルからハイブにデータをエクスポートしています。

次のエラー メッセージが表示されます。

少なくとも、 --connect および --table 引数を mysqldump に指定する必要があり、他のサブプログラムはコマンド ラインの「--」の後に指定できます。

--query param を削除すると、デフォルトのクエリを使用してデータがエクスポートされ、正常に動作します。

-e パラメータも試してみましたが、それでも同じエラーが発生します。

ここで何が問題になる可能性がありますか?