niusouti.com

关于MapReduce中Shuffle过程,说法错误的是()。A.Shuffle过程中为每个Map任务分配一个缓存B.Shuffle过程中分区默认采用哈希函数C.Shulle过程的合并会改变最终结果D.Shuffle过程在Reduce端首先从Map端领取结果，然后执行归并操作，最后输送给Reduce任务进行处理。

题目
关于MapReduce中Shuffle过程,说法错误的是()。

A.Shuffle过程中为每个Map任务分配一个缓存

B.Shuffle过程中分区默认采用哈希函数

C.Shulle过程的合并会改变最终结果

D.Shuffle过程在Reduce端首先从Map端领取结果，然后执行归并操作，最后输送给Reduce任务进行处理。

相似考题

1.15、15. Hadoop中，MapReduce处理流程的三大步骤不包括（）。A．MapB．ReduceC．SortD．Shuffle

2.MapReduce中合并和归并都属于Shuffle操作。

3.15. Hadoop中，MapReduce处理流程的三大步骤不包括（）。A．MapB．ReduceC．SortD．Shuffle

4.MapReduce计算文件词频的例子中描述不正确的是A．包括了Split，Map，Shuffle，Reduce几个过程。在计算过程中数据始终以键值对的形式存在。B．Split就是将输入文件中的内容按行分割为key和value的形式。Map阶段对每块的每一个单词为key，单词个数作为value排序进行输出。C．在Shuffle阶段，会对map的输出按照key进行合并和排序。D．Reduce的过程将所属key下的value进行了叠加，计算出单词key的次数。

更多“关于MapReduce中Shuffle过程,说法错误的是()。 ”相关问题

  • 第1题：

    以下关于MapReduce计算框架描述正确的是？

    A．来源于Google的大数据技术。

    B．其原理是分而治之。

    C．Shuffle是排序的意思，需要编写代码实现。

    D．词频统计的实现过程中，reduce部分并不需要代码实现。


    ABCD

  • 第2题：

    MapReduce执行的全过程包含，从分布式文件系统读入数据、执行Map任务输出中间结果、通过Reduce阶段把中间结果分区排序整理，执行Shuffle任务得到最终结果并写入分布式系统文件


    ABCD

  • 第3题：

    【单选题】MapReduce的哪个阶段无须手动编码？

    A．Map阶段

    B．Reduce阶段

    C．Shuffle阶段

    D．Finalize阶段


    Shuffle阶段

  • 第4题：

    1、关于MapReduce说法错误的是

    A．MapReduce算法是一种通用的计算方法

    B．MapReduce算法体现了分治法的思想

    C．MapReduce算法只适用于Hadoop框架

    D．MapReduce算法是Hadoop的核心技术之一


    如果节点失败了，需要重新跑整个任务

  • 第5题：

    68、MapReduce执行的全过程包含，从分布式文件系统读入数据、执行Map任务输出中间结果、通过Reduce阶段把中间结果分区排序整理，执行Shuffle任务得到最终结果并写入分布式系统文件


    从分布式文件系统读入数据。;执行 Map 任务输出中间结果。;通过 Shuffle 阶段把中间结果分区排序整理后发送给 Reduce 任务。;执行 Reduce 任务得到最终结果并写入分布式文件系统。

相关内容