問題タブ [hortonworks-sandbox]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
talend - ローカルファイルを HDFS にコピーする際の Talend の問題
こんにちは、ソース ファイル システム (ローカル ファイル システム) から HDFS にファイルをコピーする方法を知りたいです。ソース ファイルが既に HDFS にコピーされている場合、そのファイルを削除または無視して、Talend を使用して HDFS に再度コピーする方法を教えてください。
ありがとうベンカット
jdbc - Sqoop list-databases には --connection-manager が必要です
Hortonworks Sandbox HDP 2.4 を使用していますが、このlist-databases
ツールimport
は機能していますが、使用できません。
これは私が得る結果です
パラメーターを設定する必要があるとの応答がありましたが--connection-manager
、これはわかりません。
--driver 引数を取り出すと、例外が発生します。
の値は--connection-manager
何ですか?
hadoop - HDP 2.4 を使用して Hortonworks サンドボックスで Mapreduce ジョブのログを確認する方法
つまらない質問かもしれませんが、多くの調査を行った後でも、hortonworks サンドボックスのリソース マネージャー UI からマップ削減ジョブ ログを確認する方法がわかりませんでした。
どんな助けでも大歓迎です。
ありがとう。
hadoop - Flume HDFS シンクが Kafka チャネルから hdfs にファイルを作成しない
Kafka チャネルからイベントを取得し、テキストファイルとして hdfs に書き込む単純な Flume HDFS シンクを実装しようとしています。
アーキテクチャは非常に単純です。イベントは twitter からストリーミングされ、kafka トピックにピップされ、flume hdfs シンクは実際にこれらのイベントを hdfs に書き込みます。これは、 Kafka プロデューサーの stackoverflow questionのパート 2 です。
このコマンドの実行中にエラーは発生せず、正常に動作しているように見えますが、hdfs でテキスト ファイルを表示できません。フォルダにログ ファイルが作成されていないため、デバッグや調査を行うことができません/var/log/flume/
。Hortonworks サンドボックス 2.3.1 と hue を使用してファイル システムを参照しています。
Flume を実行するコマンド: flume-ng agent -n KafkaSink -c conf -f tweets_sink_flume.properties
Flume プロパティ ファイル: tweets_sink_flume.properties
関連する Flume コンソール出力の一部を次に示します。
google-compute-engine - OVA ファイル (VirtualBox イメージ) を使用して Google Compute Engine VM インスタンスを作成する
Hortonworks サンドボックスのVirtualBox/VMware イメージを Google Compute Engineにロードしたいと考えています。出来ますか?はいの場合、どのように?
イメージをラップトップにローカルにロードすることはできますが、それによってすべてのリソースが消費され、すべてが遅くなります。
hadoop - ナットのインジェクターが機能しない
Elasticsearch 1.1.1 hbase 1.1.2 gora 0.3 jdk 7 を使用して、Hadoop (hdp サンドボックス 2.3) の Nutch 2.2.1 でインジェクターを起動しようとしましたが、次の例外が発生します。