Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
Hadoopマップタスクが出力をローカルディスクに書き込むことを読みました。
レデューサーのないマップのみのタスクがある場合でも、マップ出力はローカルファイルシステムに書き込まれますか?
はい、それでもFileOutputFormat.setOutputPath(JobConf、Path)によって設定されたパスに出力を書き込み、並べ替えやパーティション化は行われません。
より詳しい情報:
更新:Chris Whiteが述べたように、ローカルファイルシステムではなく、HDFSに直接書き込まれます。