問題タブ [namenode]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - データ/名前ノードの変更時に Hadoop 接続がエラーを拒否しました
VMware ワークステーションを使用してスタンドアロンの Hadoop をセットアップしています。次のコマンドを使用して Hadoop を開始できます。/start-dfs.sh ./start-yarn.sh
ここに hdfs-site.xml があります
これで、指定したい別の dfs ディレクトリが与えられました。この dfs ディレクトリには、namenode、datanode、secondarydatanode などのディレクトリが含まれていることに注意してください。この記事を参照として使用しています（https://community.hortonworks.com/articles/2308/how-to-move-or-change-the-hdfs-datanode-directorie.html）
ただし、hdfs-site.xml を新しいノード (パス mynewdatanode 内) に構成した後、次のようにします。
上記の構成で Hadoop を開始しましたが、接続拒否エラーが表示されます
任意のポインタをお願いします? とても有難い。
shutdown - Hadoop NameNode
私はHadoopの初心者です。
私が修正しようとしている2つの大きな問題は次のとおりです:-
1.) cmd ( start-all.cmd) を使用して Hadoop を開始しているときに、namenode が開始されません。以下のエラーが表示されます。
SHUTDOWN_MSG : Admin/192.168.1.6 で NameNode をシャットダウンしています
以下の手順に従って修正しようとしました:-
a) まず、自分のコンピューターのホスト名を取得します。コマンドを実行することで取得できます$hostname。私のホスト名は管理者です。192.168.1.6次に、 localhost ホスト名をファイルに追加し/etc/hostsます。
しかし、etc フォルダーに hosts という名前のファイルを取得していません。.txtetc フォルダーにファイル () を作成する必要があるのか、それとも他に何かする必要があるのか、混乱しています。
2.) また、私の分析では、コマンド ( start-all.cmd) の実行中に、3 つのフォルダー (hortonworks、USER、および tmp) が自動的に作成されていることを確認しました。その理由が気になります。助けてください。
hadoop - Hadoop で NameNode、DataNode、Mapper、Reducer の数を設定する方法
枚数の設定方法が知りたい
NameNode
データノード
マッパー
レデューサー
Hadoopのコード/構成で。
hadoop - Hadoop の NameNode が実行されておらず、(http://localhost:50030) にアクセスできません
Hadoop 1.2.1 スタンドアロン モードを使用しています。jps コマンドを使用すると、出力は次のようになります。
2528 TaskTracker
3044 Jps
2380 JobTracker
2140 DataNode
2286 SecondaryNameNode
実行中の NameNode がありません。理由はわかりません。..
http://localhost:50030を開こうとすると...開かない
http://localhost:50070 open .. but can't open :
ファイルシステム
Namenode ログ を参照
sudo su を使用してルートになろうとすると、次のようになります。
hduser は sudoers ファイルにありません。この事件は報道される。
どうすればこれを修正できますか?
hadoop - hadoop - フォーマットなしで namenode を実行できない
この質問が以前に尋ねられたことは知っていますが、次の解決策を見ました。
hdfs-site.xml ファイルを変更し、一時ディレクトリの内容も削除しましたが、namenode をフォーマットしないと起動しません。また、value タグの値で指定されたディレクトリのパスは、既に存在している必要がありますか?
上記の更新で欠けている点は何ですか?
file - namenode および datanode ファイルからの Hadoop リストア
別の Hadoop インストールから、datanode、namenode、およびセカンダリ namenode フォルダー (内部にすべてのデータまたは情報を含む) があります。
私の質問は、そこにあるものを確認したり、ローカルの HDFS に追加してデータや情報を表示したりするにはどうすればよいかということです。
それを復元する方法などがあるかもしれませんが、それに関する情報は見つかりません。
フォルダ ツリーは次のようになります。
Namenode と SecondaryNamenode の場合:
データノードの場合:
前もって感謝します。
hadoop - ワーカー ノードでデータ ノードを開始すると、このエラーがスローされます
hadoop-2.5.1 と hbase-1.0.1 を使用しています
ワーカーノードでデータノードを起動すると
それは投げますSLF4J:class path contains multiple SLF4J bindings
データノードが開始されていません