题目内容
(请给出正确答案)
[单选题]
下列关于Map/Reduce并行计算模型叙述正确的一项为()
A.Map/Reduce把待处理的数据集分割成许多大的数据块
B.大数据块经Map()函数并行处理后输出新的中间结果
C.reduce()函数把多任务处理后的中间结果进行汇总
D.reduce阶段的作用接受来自输出列表的迭代器
查看答案
如果结果不匹配,请 联系老师 获取答案
A.Map/Reduce把待处理的数据集分割成许多大的数据块
B.大数据块经Map()函数并行处理后输出新的中间结果
C.reduce()函数把多任务处理后的中间结果进行汇总
D.reduce阶段的作用接受来自输出列表的迭代器
A.支持计算在内存中进行,中间结果不落地
B.支持Map后连续任意多个Reduce操作
C.可以在上一次的reduce结束之后,直接增加一次map
D.从Map直接到Reduce,省去Shuffle阶段
A.Partition操作发生在Map输入分片时
B.Partition操作发生在Map作业输出时
C.可以按需实现特定的Partitioner算法,提高map效率
D.可以按需实现特定的Partitioner算法,提高reduce效率
E.一个Partitioner对应一个reduce作业
A.600600
B.3000600
C.3000300
D.300300
A.MapReduce是一种计算框架
B.Google发表了MapReduce的学术论文
C.MapReduce只能用Java编写
D.MapReduce隐藏了并行计算的细节,方便使用