校招刷题群
高效刷题 迎战校招
校招精选试题
近年面笔经面经群内分享
Java刷题群 前端刷题群 产品运营群
首页 > 开源框架 > haddop
题目

如何判定一个job的map和reduce的数量?

解答

1.map数量
splitSize=max{minSize,min{maxSize,blockSize}}
map数量由处理的数据分成的block数量决定default_num = total_size / split_size

2.reduce数量
reduce的数量job.setNumReduceTasks(x);x 为reduce的数量。不设置的话默认为 1

C 1条回复 评论
慨然思既往

楼主的这篇文章写得很精彩,总结的很到位,支持一个

发表于 2025-09-15 23:00:00
0 0