HadoopMapperクラスのすべてのインスタンスでメモリを割り当てることを避け、GC に依存してこのメモリをクリーンアップするために、メソッドで読み取りと書き込みにアクセスする静的オブジェクトを使用しますmap。
スレッドセーフを気にする必要がありますか?
質問する
1355 次
2 に答える
3
デフォルトでは、各マップ タスクは独自の JVM で実行されます。したがって、静的オブジェクトを使用してもメリットはありません。実際にパフォーマンスの問題に直面しない限り、奇妙なことをしないことをお勧めします。
于 2013-03-20T15:17:37.183 に答える
1
エンノとケツァルコアトルが言ったことに付け加えます。JVM で map タスクが実行されるたびに、Mapper クラスのオブジェクトが 1 つ作成され、入力ごとに (つまり、TextInputFormat を使用する場合はファイルの行ごとに) map fn が呼び出されます。ただし、マップ fn を並列ではなく順番に呼び出します。したがって、使用しているオブジェクトのスレッド セーフの問題はないはずです。
よろしく、マニッシュ
于 2013-06-11T21:48:05.013 に答える