問題タブ [mongodb-hadoop]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
2 に答える
251 参照

java - mongoDB を使用した Hadoop: NoClassDefFoundError MongoConfigUtil

mongodbデータを入力としてhadoopでマップ/リデュースジョブを作成する方法を学んでいます。したがって、この例に従いましたが、次のエラーが発生しました:

結果なしで何時間も検索してきました。誰でも私を助けてください。

0 投票する
1 に答える
1397 参照

mongodb - Mongo-Hadoop コネクタ for Spark を使用してドキュメント (レコード) を削除する方法

Mongo-Hadoop コネクタを使用して Spark と MongoDB を操作しています。RDD のドキュメントを MongoDB から削除したいのですが、ドキュメントの更新をサポートする MongoUpdateWritable があるようです。Mongo-Hadoop コネクタで削除する方法はありますか?

ありがとう

0 投票する
1 に答える
59 参照

apache-spark - Spark Mongo Hadoop コネクタがデータをマッピングしていない

Spark アプリケーション内で mongodb-hadoop コネクタからデータをマップしようとしています。これより前に他のエラーはないので、mongodb への接続が成功したと仮定します。次のコードを使用してマップします。

コードはこれで失敗します:

0 投票する
0 に答える
35 参照

java - mongo-hadoop Java コネクタ すべてのコレクションを反復する

この Hadoop mongo コネクタを使用しようとしていますが、

https://github.com/mongodb/mongo-hadoop

このようなものを使用して特定の mongo コレクションに接続する多くの例を見てきました。

mongodbConfig.set("mongo.input.uri", "mongodb://localhost:27017/dbname.collection");

しかし、さまざまなコレクションからレコードを取得する必要があるため、入力 uri で特定のコレクションを 1 つ指定することはできません。私はこれを探していましたが、関連するものを見つけることができませんでした。これについてどうするかについてのアイデア。前もって感謝します。

0 投票する
2 に答える
2284 参照

mongodb - MongoDB Spark Connector を使用してタイムスタンプに基づいてフィルタリングする

Spark MongoDB コネクタを使用して mongodb からデータを取得しています。ただし、集約パイプライン (rdd.withPipeline) を使用して Spark を使用して Mongo でクエリを実行する方法を取得できません。以下は、タイムスタンプに基づいてレコードを取得するコードです。 & データフレームに保存:

これは、タイムスタンプ値に spark を使用して mongodb でクエリを実行する正しい方法ですか?