java - シングルノードクラスターでの分散キャッシュとFileReaderの使用

Question

分散キャッシュを使用するには、複数のノードクラスターが必要ですか、それとも単一ノードクラスターで十分ですか。FileReaderは、ファイルのパスを指定することにより、HDFSに保存されているファイルを直接開くことができますか。

Answer 1

それは実際には必須ではありません。分散キャッシュの使用の背後にある主な目的は、クラスター全体のすべてのノードで実行されているすべてのマッパーまたはリデューサーがリソースを利用できるようにすることです。これは、単一のマシンではあまり意味がありません。単一ノードのHadoopクラスターでは、mapreduceコードにグローバル変数を含めるだけでうまくいきます。