問題タブ [microsoft-distributed-file-system]

最近、webfarmに移動してdfsをセットアップしましたが、ベータ版アプリケーションが明日がないようにファイルを作成していることがわかりました。ファーム全体で120万個のファイルが複製され、それ以降、アプリケーションが新しいファイルを作成できないようにしましたが、ファイルを削除しようとするたびに、複製のために各サーバーでファイルが置き換えられます。それらを交換するプロセスにより、実際にはサーバーの実行が遅くなり、場合によっては停止します。

フォルダレベルでレプリケーションを停止する方法はありますか？

DFSを使用してWebファーム間でコンテンツを同期するのは良い考えですか？誰かがこれの経験がありますか？過去にRobocopyを使用したことがありますが、少し斑点があり、不格好です。基本的に、1つのファイルが変更されるたびにコンテンツに10の変更を加える必要はありません（これは、サイトが古く、従来のASPを使用しているために頻繁に発生します）。

私が収集したところによると、DFSは通常、地理的に離れた場所を対象としており、ユーザーにとってUNC共有がよりシンプルで管理しやすいように見えるようにするために使用されます。

私がそれで達成したいのは、ハブとなる10台のサーバーのうちの1台にコンテンツの変更のみをコピーすることです。次に、FRSを使用して他の9台のサーバーをスポークとして構成します。

この方法論についての考えや、より良いセットアップのための提案をいただければ幸いです。

DFS パスが与えられた場合、どの物理ファイル サーバーにマップするかをプログラムで特定するにはどうすればよいですか?

スクリプトやコマンド ライン、またはカスタム プログラムを使用して、共有の UNC パスを見つける方法が必要です。ユーザーの削除を自動化しようとしていますが、セットアップは少し複雑です。

ホーム フォルダは次のように設定されます。

ファイルサーバーのディスクにフォルダーを作成します。このフォルダが作成されると、下位レベルに共有が自動的に作成され、新しく作成された共有に対して DFS リンクが設定されます。

ここで、ユーザーを削除するときに、DFS フォルダーを削除するだけで済みます。つまり、ターゲット フォルダーが削除されることになります。でもシェアだからそんなことはあり得ない。

SO、この共有が実際に指している場所を見つけて、そのフォルダーをプログラムで削除する必要があります。

何か案が？

ネットワークを介してファイルを同期または複製する最も簡単な方法は何ですか？負荷分散のためにラック内でいくつかのサーバーを実行していて、コンテンツをミラーリングしたいと考えています。

たとえば、FTPアップロードを行うサーバー1があります。サーバー2は別のノードです。手動の方法では、サーバー2へのFTPアップロードも実行できますが、自分の存在なしで、またはユーザーがログインしていなくても、自動的に実行できると確信しています。

SyncToyを試しましたが、ユーザーがログインしていないと実行されません。手動で実行する必要があります。

より良い方法はありますか？Microsoft DFSを見ましたが、セットアップするには複雑すぎます。

Windows をサポートする DFS を見つけたいと思っています。そのような DFS は Hadoop HDFS だけですが、Cygwin + SSH が必要なため、他の多数の Windows マシンに展開するのは非常に困難です。

ほとんどすべての DFS システムは Linux でのみ動作し、1 つ (HDFS) のみが Windows で動作します。

誰かが Windows をサポートする他の DFS を教えてくれたらとてもありがたいです。

DFS から、DFS ノード間でファイルの負荷を分散する機能、圧縮、および DFS を操作するための多言語 API が必要です (DFS をマウントする必要はありません)。

分散環境で毎日 50Gb のログを保存するのに問題があります。Hadoop HDFS を調べましたが、Windows インフラストラクチャでの実行に問題があり、多言語ファイルシステム API が不足しているため、私にはあまり適していません。一方、Cassandra は、どのプラットフォームにも簡単にデプロイできます。私が直面している唯一の大きな問題は、ディスク容量の使用です。数値は次のとおりです。

• 元のログ サイズは 224Mb です
• Cassandra データ ファイルは 557Mb です
• Cassandra インデックス ファイルは 109Mb です

そのため、ログ ファイルからログ行を保存するときに、ほぼ 2 倍のオーバーヘッドが発生しました。

非常に単純なシナリオで大量のディスク容量を消費しないように、何らかの方法で Cassandra を調整することは可能ですか?

(windows 2003 + tomcat 6) で負荷分散を行っていますが、異なるホスト OS で実行される可能性のある tomcat Web アプリケーション インスタンスのそれぞれに公開される共有フォルダーが必要です。共有フォルダーで集中的な I/O 操作が行われている可能性があります。DFS、OpenAFS .....、手がかりはありますか?

AppfabricのASP.NETSessionManagerの置き換え部分に非常に興味があり、分散キャッシュマネージャーにもある程度興味があります。ホスティング機能は必要ありません。社内にクラスター化されたSQLServerがありますが、それをaspnet / oracleアプリケーションの依存関係として追加しても、おそらく十分に受け入れられないでしょう。

ネットワークベースのXMLファイルオプションがあり、appfabricビデオは、小規模な展開（1つの2ノードファーム、1つの5ノードファーム）で問題ないことを示唆しています。

では、バックエンドにSQLServerがない場合の成功事例はありますか？DFSネットワーク共有は、SQLServerではなくAppfabricに対して十分な信頼性があることが証明されますか？

Webdeploy は、WebDav、FTP、および FrontPage 拡張機能に代わるものです。また、Web サイトを複製するための DFS の代替としても機能します。Windows 2008 の設定手順は見つかりましたが、特に複数のサイトや IP アドレスが存在する場合に 2003 を設定する方法がわかりません。