MapReduce模型--Map端Combiners聚合

时间:2016-06-17 09:25:23
【文件属性】:
文件名称:MapReduce模型--Map端Combiners聚合
文件大小:103KB
文件格式:PDF
更新时间:2016-06-17 09:25:23
hadoop mapreduce combiners Combiners是对Map端的数据进行适当的聚合,其好处是减少了从Map端到Reduce端的数据传输量。 其作用的本质,是将Map计算的结果进行二次聚合,使Key-Value中List的数据量变小,从而达到减少数据量的目的。

网友评论