問題タブ [sqoop2]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
jdbc - Hue sqoop 2 を使用して vertica からデータを取得する
CDH Hue をインストールし、完全に実行しています。hue sqoop2 を使用して vertica からデータを取得しようとしています。新しい接続 sqoop hue を作成するには、次のように設定して、いくつかのパラメーターを要求します
名前: Vertica
コネクタ: generic-jdbc-connector
JDBC ドライバー クラス: com.vertica.Driver
JDBC 接続文字列: jdbc:vertica://host001:5433/Stock_Schema
ユーザー名: XXXX
パスワード: XXXX
問題は、「指定されたドライバーを読み込めません」というメッセージが表示されるため、接続を作成できないことです。コネクタをパス/var/lib/sqoop2 (vertica-jdbc-4.1.14.jar,vertica-jdk5-6.1.3-0.jar) にロードしようとしましたが、env var $HADOOP_CLASSPATHを設定しようとしましたが、これはすべて動作します。
推測できますか？
hadoop - Sqoop2 TEXT_FILE 出力形式の構成
Postgresql データベースからデータをインポートするために Sqoop2 (Sqoop 1.99.3-cdh5.1.0) を使用しています。ジョブが正常に完了し、HDFS にテキスト ファイルが作成されます。出力ファイルは一重引用符付きの CSV です。出力を引用符なしでタブ区切りにするように構成したいと思います。
Sqoop2 の出力形式は設定可能ですか?
hadoop - sqoop 1.4.2 のデフォルトの HSQLDB 以外のメタストアを使用できますか?
sqoop 1.4.2 のデフォルトの HSQLDB 以外のメタストア (MYSQL など) を使用できますか?
hadoop - Sqoop1 を Hadoop2 で動作させる
hadoop2 で sqoop1 を動作させるのに苦労しました。Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.util.Tool私は常にsqoop1 が hadoop1 を使用しようとしていることを示唆するint エラーを実行します。しかし、 http: //www.us.apache.org/dist/sqoop/1.4.5/ から Hadoop 2.0.4-alpha リリースで sqoop1 jar をダウンロードしました。
では、hadoop2 で動作しないのはなぜですか?
PS: sqoop2 を動作させるために一生懸命努力しましたが、セットアップで多くの問題に直面しました。
また、この投稿http://mmicky.blog.163.com/blog/static/1502901542013118115417262/は、動作することを示唆していますが、この ClassNotFoundException に遭遇し続けます。
hadoop - sqoop ジョブの実行中に複数の sqoop プロパティをオーバーライドする
実行時に sqoop ジョブのプロパティをオーバーライドすると、1 つのプロパティしかオーバーライドできないことがわかりました。
例 1: 私が提出した場合
クエリ プロパティのみをオーバーライドします
例 2: 私が提出した場合
クエリ プロパティの last-value プロパティのみをオーバーライドします。
sqoop ジョブの実行中に複数の sqoop プロパティをオーバーライドすることはできますか? そうでない場合、これに対する回避策はありますか?
Sqoop ジョブを実行せずに更新できますか?