問題タブ [distributed-filesystem]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - HDFS の分割ロジック?
FileInputFormat クラスの isSplittable() メソッドの意味は何ですか? http://hadoop.apache.org/docs/r2.2.0/api/index.html
hdfs - 分散ファイル システムの inotify に似た機能
タイトルのとおり、何かイベントが発生したときに通知をトリガーしたいと考えています。
上記のイベントは、 などのユーザー定義にすることができますupdating specified files in 1-miniute。
ファイルがローカルに保存されている場合は、システム コールで簡単に作成できinotifyますが、ファイルが mfs.
作り方は？この問題を解決するためのソリューションやオープンソース プロジェクトがあるかどうか知りたいです。ありがとう。
distributed-transactions - 3Phase コミット プロトコル - 分散システム
あるインタビューでこの質問をされました。この質問に対する答えに興味があります：
3 フェーズ コミット プロトコルで、プレコミット メッセージを送信した後、コーディネーターがすべてのリソース マネージャーから肯定応答を受信し、コーディネーターが commit コマンドを送信したときにリソース マネージャーの 1 つがコミットに失敗した場合はどうなりますか?
これに関する任意の考えをいただければ幸いです。
ありがとう。
high-availability - 保存と取得のための分散ファイル システム
さまざまな種類のドキュメントを保存および取得でき、水平方向にスケーリングできる、可用性の高い分散ファイル システムが必要です。このための理想的な選択は何でしょうか? 取得と挿入のためにその上で使用する必要があるデータレイヤーは何ですか?
java - XtreemFS の Java クライアント
大きなファイルの保存と取得が必要な Java Web アプリケーションを構築しています。将来のためにアプリケーションを拡張できるようにしたいので、XtreemFS http://www.xtreemfs.org/を分散ファイル システムとして使用することを計画していました。必要な冗長性と速度を提供します。
Java用の直接クライアントを見つけたいと思っていますが、見つけるのに少し苦労しています。XtreemFS には、冗長性のレベルを制御できる高度な機能がいくつかあります。ファイルを読み取り専用にすることで、ロックのオーバーヘッドを減らすことができます。
Java クライアントが見つからない場合は、サーバーに XtreemFS データ ストアをマウントし、ローカル ストレージと同じように扱い、基本的な java.io.* クラスを使用して、そこからファイルを読み書きします。ディスク上のファイルのみ。
XtreemFS を使用するためのベスト プラクティスに関する提案はありますか?
java - 分散ファイルシステム クラスは、分散クラスの代わりにローカルを使用します
コードに次の行があります。
otherArgs[1]次の値があります。hdfs://master:54310/input/results
私はこの例外を受け取ります:
注: new Path(otherArgs[1])URI なしで使用しようとしましたが、まったく同じエラーが発生しました。
ありがとう、-K