大数据计算服务MaxCompute的MapReduce处理数据过程主要分成2个阶段:Map阶段和Reduce阶段;首先执行Map阶段,再执行Reduce阶段。当Map阶段的重复记录比较多时,还可以选择在Map结束后进行哪种操作用来优化计算框架?
A排序(Sort)
B哈希函数(artitioner)
C归并函数(Combiner)
D洗牌(Shuffle)
相关试题
-
大数据计算服务MaxCompute的MapReduce处理数据过程主要分成2个阶段:Map阶段和Reduce阶段;首先执行Map阶段,再执行Reduce阶段。当Map阶段的重复记录比较多时,还可以选择
-
MapReduce计算框架的计算过程分为Map阶段和Reduce阶段两个阶段,并分别以两个函数map()和reduce()进行抽象。()
-
MapReduce计算框架的计算过程分为Map阶段和Reduce阶段两个阶段,并分别以两个函数map()和reduce()进行抽象。()
-
链式MapReduce计算中,对任意一个MapReduce作业,Map和Reduce阶段可以有无限个Mapper,但Reducer只能有一个。()
-
为了降低 MapReduce 两个阶段之间的数据传递量,一般采用( )函数对 map阶段的输出进行处理。