clouderaを使用して、単一のマシン(もちろん、多くのVMを使用)でHadoopジョブをシミュレートしたいと思います。2つの質問があります1)clouderaでHDFSのレプリケーションポリシーを変更できますか?2)各VMのCPU使用率を確認できますか?
2 に答える
1
hadoop fs -setrep
任意のファイルのレプリケーション係数を変更するために使用できます。hdfs-site.xml
以下を追加して変更すること
により、デフォルトのレプリケーション係数を変更することもできます。<property>
<name>dfs.replication</name>
<value>2</value>
</property>
各ボックスにログインし、を使用top
して各VMのCPU使用率を確認する必要があります。Hadoopには、これを確認できるものは何もありません。
于 2012-04-26T04:18:07.357 に答える
0
「ReplicationTargetChooser.java」を変更することで、データレプリケーションポリシーを変更できることがわかりました。
于 2012-04-26T16:55:35.083 に答える