天天看點

hadoop 輸出的 *-m-0000檔案和*-r-0000檔案

臨時記錄,僅供參考

在MR項目中,當Reduce函數中有落盤操作,且指定CombinerClass為Reduce函數,則輸出結果檔案為多個包含“-m-”的檔案,如果不指定CombinerClass,則生成檔案為包含“-r-”的單個檔案。

總結:MR程式在不同階段落盤,生成的檔案名和數量存在差異。

繼續閱讀