私は Hadoop を初めて使用し、マルチノード クラスターをセットアップするためのリファレンスをオンラインで探していました。さまざまなサイトと公式ドキュメント (私のような初心者には複雑すぎる) を参照した後、このブログをガイドとして使用しています。
しかし、構成ファイルでポート番号がどのように決定されるのか理解できませんか? つまり、「Haoop In Action」、前のリンク、および他のサイトを参照しましたが、誰もがデータノード、ジョブトラッカーなどに異なる値を使用しているようです.
公式ドキュメントから共通ユーザーの Web UI を参照したところ、次のことがわかりました。
デフォルトの Hadoop ポートは次のとおりです。
Daemon Default Port Configuration Parameter
HDFS Namenode 50070 dfs.http.address
Datanodes 50075 dfs.datanode.http.address
Secondarynamenode 50090 dfs.secondary.http.address
Backup/Checkpoint node? 50105 dfs.backup.http.address
MR Jobracker 50030 mapred.job.tracker.http.address
Tasktrackers 50060 mapred.task.tracker.http.address
ただし、 fs.default.name の 9000 や同じものの 54310 などの値に遭遇しました。これも正しいですか?任意の値を使用できますか? できるだけ早くこれについて助けが必要です。ありがとう :)