問題タブ [apache-tez]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - 失敗した Pig スクリプトは、バッチ処理中に終了 0 を返します
シェル ラッパーに埋め込まれた Pig スクリプト (Tez 対応) は、終了コード 0を返すか、エラーがスローされても 正常に終了します。
バッチ プロセスの場合、タスクはエラーになり、プロセスを停止するはずです。ただし、この場合、すべてのダウンストリーム タスクが実行されます。
Pig Jira を読むと、 0.8.1で修正されたと言われていますが、私は0.14を使用していますが、まだ問題があります。
誰かがそのような問題に直面したことがありますか?
java - createBlockOutputStream の例外 java.io.IOException: firstBadLink との接続確認が正しくありません
このエラーが発生する理由は何ですか? 10.0.1.193私のスレーブ VM の 1 つです。
linux - 診断:ユーザーによってアプリケーションが強制終了されました
私のアプリケーションが殺される理由は何ですか? 私はこのノードの唯一のユーザーです。また、履歴サーバーには何も表示されません。これをさらに追跡し、誰がそれを殺したのか、なぜ、どのように修正するのかを理解するにはどうすればよいですか?
hadoop - トラッキング URL : 該当なし、RPC ポート : -1
これは大丈夫ですか、それとも修正する必要がありますか?
ubuntu - DataXceiver エラー処理 WRITE_BLOCK 操作
エラーは次のとおりです。
http://pastebin.com/bP6W7P7y DataNode ログ (エラーを含む)
現在表示されているノードの 2 つのスクリーンショットと、現在表示されている gridmix-generate.sh から現在表示されているもののスクリーンショットを添付しました。
http://pastebin.com/jd12yDEk gridmix-generate ランタイム ログ
yarn-site.xml には、yarn.execution.optimistic-containers-policy only_conservative があります。
すべての VM でまったく同じ conf フォルダがあります。dstat をインストールしました。
現在、ノードはまだダウンしていませんが、実行中のどこかでノードがダウンして欠落しているため、何が間違っているのか、何が欠けているのか考えてみてください。
最後に、私たちの糸アプリケーションのステータスを示します: http://pastebin.com/WiMa0yRf
hadoop - Cloudera CDH が tez-ui の yarn タイムライン サーバーを起動できない
Cloudera Manager の高度な構成オプションで yarn-site.xml に構成を追加して糸タイム サーバーを有効にすると、次のようになります。
その後、クラスタを再起動しますが、タイムライン サーバーが起動しません。ヤーン ログにタイムライン ログが見つかりません。
CDH バージョンは CDH-5.3.6-1.cdh5.3.6.p0.11、hadoop バージョンは 2.5.0 です。
hadoop - minReplication (=1) ではなく、0 ノードにしかレプリケートできませんでした。4 つのデータノードが実行されており、この操作で除外されるノードはありません
このエラーを修正する方法がわかりません:
何が起こっているのか分かりますか？