問題タブ [sqoop2]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - ハイブにデータをインポートするためのsqoop
sqoop2 を使用してハイブ テーブルにデータをインポートしようとしています。使ってるけど動か--hive-import
ない
コード:
エラー:
エラー manager.SqlManager: ステートメントの実行中にエラーが発生しました: com.microsoft.sqlserver.jdbc.SQLServerException: 無効なオブジェクト名 'XXXX.NOTIFICATION'。
私は何を間違っていますか?
shell - Linuxスクリプトを使用して、DBからHBaseへのSqoopの増分インポートを自動化するにはどうすればよいですか
sqoop ジョブを使用すると、HBase への増分ロードを実行できます。--lastval
しかし、シェル スクリプトを使用して同じことを行うにはどうすればよいでしょ--lastval
うか。また、スクリプトを自動化したときにどのように取得するのでしょうか。
の保管--lastval
方法と次回への受け渡し方法を意味します。
助けてくれてありがとう!!
apache - Sqoop2 Rest API リンクの作成
あなたの助けが必要です!
3日間、Sqoop Rest API でリンクを作成できません。
claudera の Hadoop クラスタにインストールされた Sqoop2 Server 本文
付きのポスト リクエストを送信します。
サーバーはエラーを返します:
ドキュメントを読みましたが、json の正しい構造の解決策が見つかりません。
sqoop - Hive から vertica へのエクスポートの問題
mapr hive から Vertica にデータをエクスポートしようとしています。このために、次の sqoop コマンドを使用しました。
しかし、私は次のエラーで終わります:
Sqoop を使用してデータを vertica にエクスポートする方法を教えてください。ありがとう、Bhaskar。
rest - sqoop2 REST API が機能していません: NullPointerException
sqoop 1.99.7、hadoop 2.7.2 を使用しています
まず、json(" http://sqoop.apache.org/docs/1.99.7/dev/RESTAPI.html#v1-link-post-create-link "で "/sqoop/v1/link" をリクエストしたとき)、「リンク」キーが見つからないというエラーに遭遇しました。ということで、リンク情報を取得してみました。そして、「get link rest api」から取得したjson構造を使用しました。しかし、私は NullPointException を取得しています
これ
そして、ドキュメント内の一部の API が機能していないことがわかりました
お気に入り
- コネクタを取得する
- リンクを取得する
そしてもっと思う..
これは私の問題ですか?どうすればこれを修正できますか?
追加: シェルは正常に動作します
mysql - sqoop2(1.99.7) で Java API を介して mysql ストアド プロシージャを呼び出すことは可能ですか?
sqoop2(1.99.7)でJava APIを介してmysqlストアドプロシージャを呼び出すことは可能ですか??
私はsqoop2でストアドプロシージャを呼び出すことに関連するものを見つけることができました..
誰かそれを知っていますか?
avro - sqoop export avro ネストされたレコード AvroExportMapper
RecordA の avro レコード スキーマを
および RecordB avro レコードとして
sqoop-export に、 mysqoopfield の値を列 mysqoofield だけのテーブルで RDBMS にエクスポートできるメカニズムはありますか?
試しました
動作しません。。AvroExportMapper によって「_」に変換されます。さらに掘り下げる前に、これがサポートされているかどうかを確認しますか? カスタムマッパーの実装を sqoop に提供できるようにも見えませんか?
java - Unable to find hadoop Configuration classes when starting Sqoop2 server (1.99.7)
I'm working on testing out using Hadoop with the latest version of Sqoop2 (1.99.7), and when running the sqoop2-server, I get the following error:
My current setup:
- Using the latest https://hub.docker.com/r/sequenceiq/hadoop-docker/ image for Hadoop
- Downloaded the latest Sqoop2 binaries (http://sqoop.apache.org/) and installed them into a running container at /usr/lib/sqoop/
- Run /usr/lib/sqoop/bin/sqoop2-server start
Best I can figure is the Hadoop classpath isn't being loaded by Sqoop, as the required JAR's appear to be located at /usr/local/hadoop/shared/*.
Most of the documentation I've been able to find online is for pre-1.99.7, but one major change in this version is that the Sqoop server moved from Tomcat to Jetty, so all of the catalina configuration options are moot.
Can someone help me figure out how to get Sqoop server to run?