hadoop - 疑似分散Hadoopモードでのhdfsの管理

Question

クアッドコアマシンでhadoopとmahoutを使用して計算を実行したいので、疑似分散モードでhadoopを使用しています。

問題は、ルートドライブのスペースが限られていることです。そのため、他の外付けハードドライブで使用可能なスペースを使用するようにルートドライブを構成するにはどうすればよいですか。

Answer 1

hdfsがデータを格納する場所を構成できます。conf/hdfs-site.xmlに以下を追加します。

<property>
    <name>dfs.data.dir</name>
    <value>__path_to_where_you_want_to_store_your_data/hdfs/data/</value>
</property>
<property>
    <name>dfs.name.dir</name>
    <value>__path_to_where_you_want_to_store_your_data/hdfs/name/</value>
</property>

これらの変更後、ネームノードをフォーマットする必要があります。

hadoop namenode -format