7

アイドル状態のときにオフィスのデスクトップにHadoopクラスターをセットアップするのに役立つプロジェクトはありますか？

Hadoop / MR / hbaseを試してみたいのですが、5〜10台のコンピューターにアクセスできません。作業中のコンピューターは、営業時間外はアイドル状態であり、非常に高速な接続を介して相互に接続されています。さらに、これらのコンピューター上のデータはネットワーク内にとどまるため、プライバシーの問題はありません。

これが機能するためには、各マシンで実行されているかなり軽量のモニターが必要です。コンピューターがX時間アイドル状態になると、クラスターに参加します。ユーザーがログオンした場合、クラスターからドロップアウトし、すべてのCPU/メモリを戻す必要があります。

このようなものはありますか？

4

5 に答える 5

3

タスク スケジューラを使用してアイドル状態を検出し、仮想ボックスまたは vmplayer で Hadoop vm を開始/停止できます。または、リソースの使用状況に基づいて停止を開始する PowerShell スクリプトを作成することもできます。

于 2012-04-14T05:24:42.837 に答える
1

コンドルのようなものを使用します: http://research.cs.wisc.edu/condor/

于 2012-06-21T14:10:00.830 に答える
1

バージニア工科大学の Project Moon http://www.wired.com/wiredenterprise/2012/05/project_moon/をご覧ください。

于 2012-06-21T17:57:34.293 に答える
1

Hadoop は計算グリッドではなく、データ グリッドです (このプレゼンテーションのスライド 9 を参照)。ポイントは、Hadoop を使用すると、データがクラスター全体に分散されるため、データをコンピューターに格納する必要があるということです。アイドル状態ではないときにデータをコピー/削除するのにかかる時間は、おそらく価値がないでしょう-クラウド（Amazon、Azureなど）でhadoopを使用する方がよいでしょう.

于 2012-04-16T08:38:50.963 に答える
0

Java の優れた MPC ソリューションであるNEREUSのようなソリューションを見てください。

于 2012-06-15T13:07:32.963 に答える