私は Hadoop の初心者で、「決定版ガイド」の本を読んでいます。
ch02 には、マッパー、リデューサー、およびメイン関数を持つクラスを持つ単純な Hadoop の例があります。
本が言うように、私は使用しなければなりません
% export HADOOP_CLASSPATH=hadoop-examples.jar
% hadoop MaxTemperature input/ncdc/sample.txt output
コードを実行します。MaxTemperature は main メソッドを持つクラスで、その後に入力パスと出力パスが続きます。
上記のコマンドを実行すると、例外が発生しました。
Exception in thread "main" java.lang.NoClassDefFoundError: MaxTemperature
Caused by: java.lang.ClassNotFoundException: MaxTemperature
at java.net.URLClassLoader$1.run(URLClassLoader.java:217)
at java.security.AccessController.doPrivileged(Native Method)
at java.net.URLClassLoader.findClass(URLClassLoader.java:205)
at java.lang.ClassLoader.loadClass(ClassLoader.java:321)
at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:294)
at java.lang.ClassLoader.loadClass(ClassLoader.java:266)
Could not find the main class: MaxTemperature. Program will exit.
.class ファイルがないことがわかったので、javac を使用して Java ファイルをコンパイルしようとしました。その後、Hadoop のすべてのクラスが見つからないというエラーが表示されました。
私はEclipseに目を向け、hadoopビルドパスでプロジェクトを作成しました。それは明らかに正常に機能し、Eclipse プロジェクトの bin フォルダーに .class ファイルが見つかりました。この時点で、これらの .class ファイルを取得したので、次を使用できます。
% hadoop MaxTemperature input/ncdc/sample.txt output
私の質問は:
javac を使用して Java ファイルをコンパイルし、.class ファイルを取得するには、hadoop クラスパスを適切に構成するにはどうすればよいですか?
( hadoop classpath
hadoop_classpath を使用したところ、非常に長いことがわかりました。クラスパスをそれほど長く設定する必要がありますか?)
ありがとうございました :)