0

MacにHadoopをインストールするための何かを設定しました。しかし、次のようなエラーメッセージがあります。

13/02/18 04:05:52 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 0 time(s).
13/02/18 04:05:53 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 1 time(s).
13/02/18 04:05:54 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 2 time(s).
13/02/18 04:05:55 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 3 time(s).
13/02/18 04:05:56 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 4 time(s).
13/02/18 04:05:57 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 5 time(s).
13/02/18 04:05:58 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 6 time(s).
13/02/18 04:05:59 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 7 time(s).
13/02/18 04:06:00 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 8 time(s).
13/02/18 04:06:01 INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 9 time(s).
java.lang.RuntimeException: java.net.ConnectException: Call to localhost/127.0.0.1:9000 failed on connection exception: java.net.ConnectException: Connection refused
    at org.apache.hadoop.mapred.JobConf.getWorkingDirectory(JobConf.java:546)
    at org.apache.hadoop.mapred.FileInputFormat.setInputPaths(FileInputFormat.java:318)
    at org.apache.hadoop.examples.PiEstimator.estimate(PiEstimator.java:265)
    at org.apache.hadoop.examples.PiEstimator.run(PiEstimator.java:342)
    at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
    at org.apache.hadoop.examples.PiEstimator.main(PiEstimator.java:351)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
    at java.lang.reflect.Method.invoke(Method.java:597)
    at org.apache.hadoop.util.ProgramDriver$ProgramDescription.invoke(ProgramDriver.java:68)
    at org.apache.hadoop.util.ProgramDriver.driver(ProgramDriver.java:139)
    at org.apache.hadoop.examples.ExampleDriver.main(ExampleDriver.java:64)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
    at java.lang.reflect.Method.invoke(Method.java:597)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:156)
Caused by: java.net.ConnectException: Call to localhost/127.0.0.1:9000 failed on connection exception: java.net.ConnectException: Connection refused
    at org.apache.hadoop.ipc.Client.wrapException(Client.java:1099)
    at org.apache.hadoop.ipc.Client.call(Client.java:1075)
    at org.apache.hadoop.ipc.RPC$Invoker.invoke(RPC.java:225)
    at $Proxy1.getProtocolVersion(Unknown Source)
    at org.apache.hadoop.ipc.RPC.getProxy(RPC.java:396)
    at org.apache.hadoop.ipc.RPC.getProxy(RPC.java:379)
    at org.apache.hadoop.hdfs.DFSClient.createRPCNamenode(DFSClient.java:119)
    at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:238)
    at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:203)
    at org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:89)
    at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:1386)
    at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:66)
    at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:1404)
    at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:254)
    at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:123)
    at org.apache.hadoop.mapred.JobConf.getWorkingDirectory(JobConf.java:542)
    ... 17 more
Caused by: java.net.ConnectException: Connection refused
    at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method)
    at sun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:599)
    at org.apache.hadoop.net.SocketIOWithTimeout.connect(SocketIOWithTimeout.java:206)
    at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:489)
    at org.apache.hadoop.ipc.Client$Connection.setupConnection(Client.java:434)
    at org.apache.hadoop.ipc.Client$Connection.setupIOstreams(Client.java:560)
    at org.apache.hadoop.ipc.Client$Connection.access$2000(Client.java:184)
    at org.apache.hadoop.ipc.Client.getConnection(Client.java:1206)
    at org.apache.hadoop.ipc.Client.call(Client.java:1050)
    ... 31 more

次に、jpsと入力してサービスを確認すると、結果は20635Jpsになります。

20466 TaskTracker

20189 DataNode

20291 SecondaryNameNode

このエラーに対処する方法がわかりません。誰かが私に答えを与えることができますか?ありがとう!!!

4

3 に答える 3

1

これは少し役立つかもしれません。ただし、最初にコマンドを使用して以前のインストールを削除する必要があります

rm -rf /usr/local/Cellar /usr/local/.git && brew cleanup

次に、U're Mac に Hadoop を新規インストールすることから始めます。

ステップ 1: Homebrew をインストールする

$ ruby​​ -e "$(curl -fsSL https://raw.github.com/mxcl/homebrew/go )"

ステップ 2: Hadoop をインストールする

$ brew install Hadoop

brew が Hadoop 1.2.1 をインストールするとします。

ステップ 3: Hadoop を構成する

$ cd /usr/local/Cellar/hadoop/1.2.1/libexec

次の行を conf/hadoop-env.sh に追加します。

export HADOOP_OPTS="-Djava.security.krb5.realm= -Djava.security.krb5.kdc="

次の行を構成タグ内の conf/core-site.xml に追加します。

<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>

次の行を構成タグ内の conf/hdfs-site.xml に追加します。

<property>
<name>dfs.replication</name>
<value>1</value>
</property>

構成タグ内の conf/mapred-site.xml に次の行を追加します。

 <property>
 <name>mapred.job.tracker</name>
 <value>localhost:9001</value>
 </property>

[システム環境設定] > [共有] に移動します。「リモートログイン」にチェックが入っていることを確認してください。

$ ssh-keygen -t rsa $ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

ステップ 4: localhost への SSH を有効にする

$ 猫 ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

ステップ 5: Hadoop ファイルシステムをフォーマットする

$ bin/hadoop namenode -format

ステップ 6: Hadoop を開始する

$ bin/start-all.sh

すべての Hadoop プロセスが実行されていることを確認します。

$ jps

Hadoop の例を実行します。

もう一つ !「brew update」は、hadoop バイナリを最新バージョン (現在は 1.2.1) に更新します。

于 2013-10-10T18:07:02.687 に答える
1

ConnectException: Connection refusedすべての secondarynamenode ログ ファイルで、同じエラーが発生しました。

しかし、namenode のログ ファイルにもこれが見つかりました。

2015-10-25 16:35:15,720 ERROR org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.
org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /private/tmp/hadoop-admin/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.

したがって、私は

hadoop namenode -format

そして問題はなくなりました。したがって、エラー メッセージは、namenode が正常に開始されなかったという事実に関するものでした。

于 2015-10-25T17:21:03.117 に答える