1

Google Compute Engine で Hadoop クラスターをセットアップしています。しかし、クラスター インスタンスがどのように機能するのか理解できません。私はすでにたくさん検索しましたが、明確な答えを与えるものはありませんでした。

Hadoop クラスターをセットアップするとき、Hadoop がインストールされている 1 つのインスタンスのイメージを作成し、このインスタンス (イメージ) を起動するたびに他のインスタンス (ノード) を作成しますか?

しかし、このアプローチでは、ノードを作成するたびにノードを構成する必要がありますか?

Google Compute Engine での Hadoop クラスタの一部のセットアップについて、これを経験したことがある人はいますか?ドキュメントを提供できますか?

4

1 に答える 1

2

Google Cloud Platform での Hadoop の実行に関する最新情報は、 https ://developers.google.com/hadoop/ にあります。

そこでは、指定した構成の詳細に基づいて Hadoop クラスターを迅速に起動できるようにする Hadoop セットアップ スクリプトを見つけることができます。セットアップ スクリプトには、Hadoop Distributed File System (HDFS) をデフォルトのファイル システムとして使用するオプション、または Google Cloud Storage を使用するオプションが含まれています。これにより、自動容量スケーリングや、Hadoop クラスターの存続期間を超えてデータを永続化するなどの追加機能が提供されます。

于 2014-05-02T18:01:41.593 に答える