こんにちは、私はこのチュートリアルに従おうとしてきました: http://www.tutorialspoint.com/apache_flume/fetching_twitter_data.htm 非常に長い間、ステップ 3: HDFS にディレクトリを作成することで完全に立ち往生しています。start-dfs.sh と start-yarn.sh を実行しましたが、チュートリアルと同じ出力が得られるため、どちらも正しく機能しているように見えますが、実行しようとすると:
hdfs dfs -mkdir hdfs://localhost:9000/user/Hadoop/twitter_data
私は同じエラーを受け取り続けます：
mkdir: Call From trz-VirtualBox/10.0.2.15 to localhost:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused
どこでも検索していくつかの解決策を試しましたが、進歩していないように見えるので、その理由を理解できません。これを引き起こす可能性があると思われるすべてのファイルをリストしますが、間違っている可能性があります: 私の core.site.xml は:
<configuration>
<property>
<name>hadoop.tmp.dir</name>
<value>/Public/hadoop-2.7.1/tmp</value>
<description>A base for other temporary directories.</description>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
私の mapred-site.xml は次のとおりです。
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>hdfs://localhost:9001</value>
</property>
</configuration>
私の hdfs.site.xml は次のとおりです。
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.permission</name>
<value>false</value>
</property>
</configuration>
仮想ボックスでUbuntu 14.04.4 LTSを実行しています。私の ~/.bashrc は次のようになります。
export JAVA_HOME=/usr/lib/jvm/java-1.7.0-openjdk-amd64
export HADOOP_HOME=/usr/local/hadoop/bin
export HADOOP_HOME=/usr/local/hadoop/bin
export HADOOP_INSTALL=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_HOME=$HADOOP_HOME
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin
#flume
export FLUME_HOME=/usr/local/Flume
export PATH=$PATH:/FLUME_HOME/apache-flume-1.6.0-bin/bin
export CLASSPATH=$CLASSPATH:/FLUME_HOME/apache-flume-1.6.0-bin/lib/*
そして最後に、私の /etc/hosts ファイルは次のように設定されます:
127.0.0.1 localhost
10.0.2.15 trz-VirtualBox
10.0.2.15 hadoopmaster
# The following lines are desirable for IPv6 capable hosts
::1 ip6-localhost ip6-loopback
fe00::0 ip6-localnet
ff00::0 ip6-mcastprefix
ff02::1 ip6-allnodes
ff02::2 ip6-allrouters
追加された hadoopmaster は現在使用していません。これは、ローカル ホストを使用しないようにしてこれを修正しようとした試みの 1 つでした (機能しませんでした)。trz-VirtualBox はもともと 127.0.1.1 でしたが、実際の IP アドレスを使用する必要があると読みました。どちらもうまくいかなかったので、よくわかりません。エラーの場所がわからないため、これらのファイルをすべて投稿しました。私はそれがパスの問題だとは思わない (このステップに到達する前に多くのことがあり、自分で解決できた) ので、アイデアがありません。私はこれに何時間も取り組んでいるので、どんな助けも感謝しています。ありがとうございました。