0

私Exceeded MAX_FAILED_UNIQUE_FETCHESは削減フェーズに乗り続けます。

オンラインで見つけることができるすべてのソリューションを試しましたが。

ノード: インストールされたサービス

Master_Node: Namenode、JobTracker

構成ファイルは以下に添付されています。

core-site.xml

<configuration>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/usr/local/hadoop-datastore/hadoop-${user.name}</value>
        <description>Hadoop Data Store</description>
    </property>

    <property>
        <name>fs.default.name</name>
        <value>hdfs://172.16.8.3:54310/</value> 
    </property>
</configuration>

mapred-site.xml

<configuration>
    <property>
        <name>mapred.job.tracker</name>
        <value>172.16.8.3:54311</value>
    </property>
</configuration>
4

2 に答える 2

0

このリンクは、ネットワーク構成の問題である可能性があることを示しているようです。

レデューサーがマップのフェッチに失敗しています (試行の失敗が多すぎるため)。これは、ネットワーク/構成の問題が原因で、Jetty サーバーにクエリを実行できないことが原因である可能性があります。

免責事項: Hadoop を専門的に使用したことはありません

于 2010-07-13T02:15:15.077 に答える
0

このエラーも発生しました:Caused by: java.io.IOException: Exceeded MAX_FAILED_UNIQUE_FETCHES; 救済。

私にとっての修正は、core-site.xml と mapred-site.xml で IP アドレスの代わりにホスト名を使用することです。ホスト ファイルを編集して、マスターとスレーブを含める必要があります。

于 2011-01-25T03:28:41.780 に答える