問題タブ [mapr]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - WindowsシステムにSqoopをインストールする方法と、必要なものは何ですか?
前提条件としてHBaseとmaprをインストールする必要があると書かれたインストールガイドを参照していたので、sqoopをインストールしようとしました。進め方がわかりません。WindowsシステムにSqoopをインストールする方法と、必要なものは何ですか?
hbase - Mapr Phoenix の統合
RDBMS から HDFS Hadoop ファイル システムにデータを移行します。RDBMS からのデータはファイルとして変換され、hadoop にアップロードされます。MapR M7 を使用しています。MapR M7 を Phoenix と統合することは可能ですか?
bigdata - Mapr M3 で Hue を実行するための EMR ブートストラップ アクション
このガイドhttp://doc.mapr.com/display/MapR/Configuring+Hueを使用して設定するのとは異なり、EMR MapR で色相を実行するためのブートストラップ スクリプトはありますか?
linux - Mapr-FS で Mapr テーブルを接続できませんか?
皆さん、
Centos 6.4、64 ビットで Mapr M7 Edition を使用しています。MapR で MapR テーブルをテストしていますが、MapR テーブルをクリックします -->
エラー このユーザーのホーム ディレクトリ (/user/root) がありません。このユーザーが管理する最近のテーブルをキャッシュするために作成してください。
- Mapr doc show を読みました: http://doc.mapr.com/display/MapR/Setting+Up+MapR-FS+to+Use+Tables
MapR テーブルのユーザー ディレクトリの設定
MapR テーブルはファイルと同様にユーザーによって作成されるため、MapR はクラスター上のユーザーのホーム ディレクトリでテーブル アクティビティを追跡します。MapR テーブルにアクセスするユーザーごとに、クラスターの /user/ にホーム ディレクトリを作成します。クラスタを NFS にマウントした後、標準の Linux mkdir コマンドを使用してこれらのディレクトリをクラスタのディレクトリ構造に作成します。 ユーザー foo がクラスター上に対応する /user/foo ディレクトリを持っていない場合、そのユーザーに属するテーブルのリストを MapR にクエリすると、見つからないディレクトリを報告するエラーが生成されます。
- しかし、その /user/ がどこに作成されたのかわかりませんか?
- クライアント Linux にマウントしています: OK
ディレクトリの作成を手伝ってくれて、どうもありがとう。
hadoop - MapR アーキテクチャと Cloudera アーキテクチャの比較
Cloudera のインフラストラクチャまたはアーキテクチャに精通しています。
マスター ノードには、NameNode、SecondaryNameNode、JobTracker、および HMaster が含まれます。スレーブ ノードには、DataNode、TaskTracker、および HRegionServer が含まれます。
マスター ノードはすべて独自のノード上にある必要があります (小さなクラスターでない限り、SecondaryNameNode、JobTracker、および HMaster を組み合わせることができ、本当に小さなクラスターの場合は NameNode でさえ)。
スレーブ ノードは常に同じノードに配置する必要があります。スレーブノードが多いほど、より楽しくなります。
高可用性のために有効にしない限り、SecondaryNameNode は誤称です。
MapR はこのセットアップを維持しますか? どのように似ていて、どのように違うのでしょうか?
hadoop - MapR - クライアント/エッジ ノードに Sqoop をインストールする方法
Cloudera アーキテクチャには精通していますが、MapR には精通していません。RHEL vm があり、このドキュメントを使用して以前に MapR クライアント ソフトウェアをインストールしました。mapreduce ジョブを送信し、期待どおりに HDFS をクエリできます。
このドキュメントに従って(MapR yum リポジトリをインストールした後)、次のように sqoop をインストールしました。
一部のデータをスクープしようとしたり、単にコマンドsqoop
を発行したりすると、次のエラーが表示されます。
/opt/mapr/sqoop/sqoop-1.4.4/bin/configure-sqoop: 47 行目: /opt/mapr/bin/versions.sh: そのようなファイルまたはディレクトリはありません
/opt/mapr/hadoop/hadoop-0.20.2 ディレクトリがあります。HADOOP_COMMON_HOME
とHADOOP_HOME
を両方に設定しようとしましたが/opt/mapr/hadoop
、/opt/mapr/hadoop/hadoop-0.20.2
それでも同じエラーが発生します。
- アップデート:
を発行しfind / -name hadoop
、最後の行が/usr/bin/hadoop
.
次に、HADOOP_COMMON_HOME を に/usr
設定すると、HADOOP_MAPRED_HOME、HBASE_HOME、および HCAT_HOME をすべて に設定するように求められました/usr
。
ただし、このエラーは引き続き存在します。
/opt/mapr/sqoop/sqoop-1.4.4/bin/configure-sqoop: 47 行目: /opt/mapr/bin/versions.sh: そのようなファイルまたはディレクトリはありません
このファイルを開き、47 行目をコメントアウトしました。これにより、sqoop コマンドを使用できるようになりましたが、インポート ジョブが失敗し、大量のError: Unsupported major.minor version
.
hadoop - Hadoop クラスターを使用しない Windows 上の MRUnit
Hadoop をセットアップせずに、Windows で Hadoop Mapreduce 単体テストを実行する方法があるかどうかを調べています。MRUnit は Java Maven プロジェクトとして Eclipse の Windows (cygwin なし) で実行されますか?
ありがとう Srivatsan Nallazhagappan