MapReduce其他功能

如何获取mr当前文件名称:

//获取当前处理切片
FileSplit fileSplit = (FileSplit)context.getInputSplit();

//根据当前切片获取
String fileName = fileSplit.getPath().getNmae();
 

mr程序是否可以没有reduce阶段?

答;如果可以,全局默认一个reduceTask         job.setNumReduceTasks(0) 解答:     如果没有reduceTask mr会直接调用输出数据组件 tEXToutPutFormat 直接输出
part-m-000000   m表示该输出是由maptask完成的

 



上一篇:P2095 营养膳食


下一篇:[hadoop] yarn工作机制详细步骤及流程图