2

Hadoop 2.4 で Oryx を実行しようとしています。Hadoop が正常に起動し、次の警告が表示されます。

WARN util.NativeCodeLoader: お使いのプラットフォームのネイティブ Hadoop ライブラリをロードできません... 該当する場合は組み込みの Java クラスを使用してください。

オリックスも無事始動。しかし、データを取り込むと、次の例外がスローされます:

2014-08-22 14:35:05,835 エラー [37788 の IPC サーバー ハンドラー 3] org.apache.hadoop.mapred.TaskAttemptListenerImpl: タスク: 試行_1408697508855_0002_m_000000_0 - 終了: org.apache.hadoop.util.NativeCodeLoader.buildSupports2Snappy() -08-22 14:35:05,835 INFO [37788 の IPC サーバー ハンドラー 3] org.apache.hadoop.mapred.TaskAttemptListenerImpl: attempts_1408697508855_0002_m_000000_0 からの診断レポート: エラー: org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy4()Z 201 -08-22 14:35:05,837 INFO [AsyncDispatcher イベント ハンドラー] org.apache.hadoop.mapreduce.v2.app.job.impl.TaskAttemptImpl: Attempt_1408697508855_0002_m_000000_0 からの診断レポート: エラー: org.apache.hadoop.util.NativeCodeLoader。 buildSupportsSnappy()Z 2014-08-22 14:35:05,840 INFO [AsyncDispatcher イベント ハンドラー] org.apache.hadoop.mapreduce.v2.app.job.impl.TaskAttemptImpl:Attempt_1408697508855_0002_m_000000_0 TaskAttempt が RUNNING から FAIL_CONTAINER_CLEANUP に遷移しました

誰かが以前にそのような問題に直面したことがありますか? どんな種類の助けもかなりのものです！

4

1 に答える 1

0

メーリング リストのスレッドからいくつかの項目をコピーします。

  • これは、インストールの Snappy ライブラリに問題がある可能性がありますが、解決されたようです
  • YARN コンテナは、仮想メモリの制限を超えて実行されているために強制終了されています。FAQを参照してください。これは、YARN 構成を変更することで回避できる Java の問題である可能性があります。
  • 最後の問題は、明確ではありませんが、YARN 構成の別の問題のようです。可能であれば、事前に構成され、動作することがわかっている新しい構成および/またはディストリビューションから始めることをお勧めします。
于 2014-08-22T12:25:49.053 に答える