MapReduce框架中,在 Map和 Reduce之间的 combiner 的作用是()
A.对 Map的输出结果排序
B.对中间过程的输出进行本地的聚集
C.对中间结果进行混洗
D.对中间格式进行压缩
- · 有5位网友选择 B,占比50%
- · 有4位网友选择 A,占比40%
- · 有1位网友选择 C,占比10%
A.对 Map的输出结果排序
B.对中间过程的输出进行本地的聚集
C.对中间结果进行混洗
D.对中间格式进行压缩
A.MapReduce框架会先排序 map任务的输出
B.通常,作业的输入输出都会被存储在文件系统中
C.通常计算节点和存储节点是同一节点
D.一个 Task 通常会把输入集切分成若干独立的数据块
A、MapReduce是一个分布式/并行编程模型,程序员通常只需要设计实现map和reduce函数
B、Shuffle过程是贯穿于map和reduce两个过程的
C、Hadoop MapReduce 1.0框架中TaskTracker负责集群资源的管理和调度
D、map和reduce的输入输出都是键值对
A.Hadoop框架是用Java实现的,MapReduce应用程序则一定要用Java来写
B.MapReduce框架采用了Master/Slave架构,包括一个Master和若干个Slave
C.Map函数将输入的元素转换成形式的键值对
D.不同的Map任务之间不能互相通信
A.Hadoop框架是用Java实现的,MapReduce应用程序则一定要用Java来写
B.MapReduce框架采用了Master/Slave架构,包括一个Master和若干个Slave
C.Map函数将输入的元素转换成 <key,value> 形式的键值对
D.不同的Map任务之间不能互相通信
A.实现WritableComparable接口的类可以是值或键
B.Hadoop的基本类型Text并不实现WritableComparable接口
C.键和值的数据类型可以超出Hadoop自身支持的基本类型
A.实现Writable接口的类是值
B.实现WritableComparable<T>接口的类可以是值或键
C.Hadoop的基本类型Text并不实现WritableComparable<T>接口
D.键和值的数据类型可以超出Hadoop自身支持的基本类型
A.对相互间具有计算机以来关系的大数据进行分而治之
B.用Map和Reduce两个函数提供了高层并行编程抽象模型
C.提供了同一框架
D.为程序员隐藏系统细节
A.主要分为 shuffle 和 sort 这 2 个阶段
B.这个阶段过程中, key 的分组规则是不可更改的
C.其中的 shuffle 和 sort 是同时进行的
D.Reduce 数目的增加不会增加系统的开销
为了保护您的账号安全,请在“简答题”公众号进行验证,点击“官网服务”-“账号验证”后输入验证码“”完成验证,验证成功后方可继续查看答案!