問題タブ [sqoop2]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
cloudera - sqoop2 ジョブを開始するための構文は何ですか?
私はsqoop2ジョブを設定しました。次のように開始しようとしています:
これは間違っているようです。ヘルプリストはコマンドとして始まるので、これを試しました:
も間違っているようです。
ここで正しい構文は何ですか?
PS:
hadoop - SQOOP テーブルをインポートできません
私はsqoopで以下のコマンドを実行しています
私のバージョンの sqoop : Sqoop 1.4.4.2.0.6.1-101
Hadoop -- Hadoop 2.2.0.2.0.6.0-101
どちらも hortonworks ディストリビューションから取得しました。HADOOP_HOME、HCAT_HOME、SQOOP_HOME などのすべてのパスが適切に設定されています。sqoop で list-database、list-tables コマンドを実行することで、mysql データベースからデータベースのリスト、テーブルのリストを取得できます。--query 'select * from widgets'; からデータを取得することもできます。しかし、 --table オプションを使用するとエラーが発生します。
cloudera - Sqoop2 Avro サポート
sqoop クライアント引数は、次のように Avro 形式としてエクスポートをサポートします。
--as-avrodatafile+
しかし、Hue と Client Java API for Sqoop を調べてみると、TEXT_FILE と SEQUENCE_FILE しかサポートしていません。AVRO のサポートを有効にする方法と、その使用方法に関するドキュメントは? Avro は列名に基づいてスキーマを作成しますか?
compiler-errors - Sqoop2: コンパイルに失敗しました: org.apache.sqoop:sqoop-core:test-jar:tests:2.0.0-SNAPSHOT がありません
最新の Sqoop2 をコンパイルすると、依存関係がないためにエラーが発生します。
org.apache.sqoop:sqoop-core:test-jar:tests:2.0.0-SNAPSHOT
このjarをインストールする方法は?
私は実行しています:
アパッチ Maven 3.2.1
Java バージョン: 1.7.0_51
CentOS 6.5、カーネル 2.6.32-431.5.1.el6.x86_64
maven - Sqoop2 をビルドするために必要な Maven のバージョン
ソースから Sqoop2 をビルドするのを手伝ってください。CentOS 6.5 で Maven 3.2.1 を使用しています。コマンドでSqoop2をコンパイルしようとすると:
次の結果として例外が発生します。
コマンドで Sqoop2 をビルドしようとすると:
次の結果として例外が発生します。
何か案は?
hadoop2 - Mysql から hdfs にデータをインポート中にエラーが発生しました
3 つのノードと sqoop 2 がインストールされた Hadoop 2.2.0 クラスターがあります。sqoop サーバーを起動すると、次の例外が発生します。
原因は何ですか?
hadoop - Sqoop が import job コマンドの --query パラメータを認識しない
mssql サーバーからハイブにデータをエクスポートしようとしています。次のコマンドを使用して、Users テーブルからハイブにデータをエクスポートしています。
次のエラー メッセージが表示されます。
少なくとも、 --connect および --table 引数を mysqldump に指定する必要があり、他のサブプログラムはコマンド ラインの「--」の後に指定できます。
--query param を削除すると、デフォルトのクエリを使用してデータがエクスポートされ、正常に動作します。
-e パラメータも試してみましたが、それでも同じエラーが発生します。
ここで何が問題になる可能性がありますか?