問題タブ [mongodb-hadoop]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
java - mongoDB を使用した Hadoop: NoClassDefFoundError MongoConfigUtil
mongodbデータを入力としてhadoopでマップ/リデュースジョブを作成する方法を学んでいます。したがって、この例に従いましたが、次のエラーが発生しました:
結果なしで何時間も検索してきました。誰でも私を助けてください。
mongodb - Mongo-Hadoop コネクタ for Spark を使用してドキュメント (レコード) を削除する方法
Mongo-Hadoop コネクタを使用して Spark と MongoDB を操作しています。RDD のドキュメントを MongoDB から削除したいのですが、ドキュメントの更新をサポートする MongoUpdateWritable があるようです。Mongo-Hadoop コネクタで削除する方法はありますか?
ありがとう
apache-spark - Spark Mongo Hadoop コネクタがデータをマッピングしていない
Spark アプリケーション内で mongodb-hadoop コネクタからデータをマップしようとしています。これより前に他のエラーはないので、mongodb への接続が成功したと仮定します。次のコードを使用してマップします。
コードはこれで失敗します:
java - mongo-hadoop Java コネクタ すべてのコレクションを反復する
この Hadoop mongo コネクタを使用しようとしていますが、
https://github.com/mongodb/mongo-hadoop
このようなものを使用して特定の mongo コレクションに接続する多くの例を見てきました。
mongodbConfig.set("mongo.input.uri", "mongodb://localhost:27017/dbname.collection");
しかし、さまざまなコレクションからレコードを取得する必要があるため、入力 uri で特定のコレクションを 1 つ指定することはできません。私はこれを探していましたが、関連するものを見つけることができませんでした。これについてどうするかについてのアイデア。前もって感謝します。
mongodb - MongoDB Spark Connector を使用してタイムスタンプに基づいてフィルタリングする
Spark MongoDB コネクタを使用して mongodb からデータを取得しています。ただし、集約パイプライン (rdd.withPipeline) を使用して Spark を使用して Mongo でクエリを実行する方法を取得できません。以下は、タイムスタンプに基づいてレコードを取得するコードです。 & データフレームに保存:
これは、タイムスタンプ値に spark を使用して mongodb でクエリを実行する正しい方法ですか?