問題タブ [rhadoop]

過去2〜3日からこれを理解しようとしているので、助けが必要です..

Windows-7 (64 ビット) マシンで Hadoop をセットアップしています。これは、R と Hadoop の統合を試すためのものです。

URL にある Hadoop のインストール手順に従いました - http://www.srccodes.com/p/article/38/build-install-configure-run-apache-hadoop-2.2.0-microsoft-windows-os

環境変数は以下の通りです。 -3.1.1\bin;C:\Hadoop\protoc-2.5.0-win32

mvn パッケージ -Pdist,native-win -DskipTests -Dtar

Windows SDK 7.1 コマンド プロンプトから上記のコマンドを実行すると、以下のエラーが表示されます...初期のヘルプは大歓迎です..

よろしくお願いします

rmr+rhdfs(Rhadoop) と Datastax cassandra(CFS) に関する説明が必要です。現在、rhdfs および rmr(to.dfs(),from.dfs()) のすべての関数が機能しています。

しかし、mapreduce() を実行しようとすると、以下のエラーが発生します。

ストリーミング コマンドが失敗しました!Hadoop ストリーミングがエラー コード 1 で失敗しました。

さらに、jobtracker.no stderr にログをまったく作成していません。原因を教えていただけると助かります。

問題をより正確に把握できるようになったため、同様の質問をもう一度投稿します。

環境: Ubuntu 14.04 ラップトップ マシンで単一ノード クラスターとして実行されている Hadoop 2.2.0。RStudio バージョン 0.98.507、R バージョン 3.0.2 (2013-09-25)、Java バージョン 1.7.0_55

すべての R (または Python) プログラムは、/usr/local/hadoop220/share/hadoop/tools/lib/hadoop-streaming-2.2.0.jar にある Hadoop ストリーミング ユーティリティと完全に連携します。

パッケージ "rmr" (RHadoop の一部) を使用し、RStudio で実行されている R プログラム内から mapreduce() を呼び出すと、エラーが発生します。

この投稿を簡単にするために、失敗する非常に単純なプログラムを示しています (他の大きなプログラムは同じエラー メッセージで失敗します)。

R-Studio コンソールに表示されるエラーは、

私は2つの刺激的な警告をグーグルで検索しました（a）スタックガードを無効にし、このリンクから、「心配することは何もない」という警告だけであることを発見しました（b）プラットフォームのネイティブhadoopライブラリをロードできません...組み込みの-を使用してjava classes where applicble .. this link によると、これは警告でもあり、心配する必要はありません

これら2つの警告が原因ではないとして割り引いた後、私が見つけた主なエラーはここにあります

RHadoop パッケージの rmr と rhdfs を再インストールし、rJava も再インストールしました。過去にHadoop 1.3でも試しましたが、エラーは同じです。

誰かがこれについて何らかの方法を提案できれば、本当に感謝しています

（hdfsなし）hadoopのデータベースで使用しています。一緒に働くことができるElasticSearchかどうか知っていますか？elasticsearch-hadoopそうでなければ、私のプロジェクトで分析を使用する方法を知っていますか?

私は RHadoop も RMR も初めてです... R Mapreduce で Mapreduce ジョブを作成する必要がありました。書いてみましたが、これを実行するとエラーになります。からファイルを読み取ろうとしていますhdfs。

Rでこれを行う方法を知っています：output <- lm(cnt~temp+hum,data)
以下のコードを実装しようとしましたが、このエラーがスローされています...

エラー：

コード：

入力：