头歌|Hadoop第二章错题

在Hadoop项目结构中，MapReduce指的是什么？

A、分布式并行编程模型

B、流计算框架

C、Hadoop上的工作流管理系统

D、提供分布式协调一致性服务

MapReduce是Hadoop项目中的一个核心组件，它是一种分布式并行编程模型，用于处理和生成大规模数据集。MapReduce模型将任务分为两个阶段：Map阶段和Reduce阶段。在Map阶段，数据被分割并分配给多个节点进行并行处理；在Reduce阶段，处理结果被汇总和整合。这种模型非常适合处理海量数据，并且能够在大规模集群上高效运行。

下面哪个不是Hadoop1.0的组件：

A、HDFS

B、MapReduce

C、YARN

D、NameNode 和 DataNode

在Hadoop 1.0中，主要组件包括HDFS（Hadoop Distributed File System）和MapReduce。HDFS负责数据的存储，而MapReduce负责数据的处理。NameNode和DataNode是HDFS的组成部分，分别负责管理文件系统的元数据和存储实际的数据块。

YARN（Yet Another Resource Negotiator）是在Hadoop 2.0中引入的，用于资源管理和作业调度。它取代了Hadoop 1.0中的JobTracker和TaskTracker，提供了更高效的资源管理和更灵活的任务调度能力。

下列哪一个不属于Hadoop的大数据层的功能？

A、数据挖掘

B、离线分析

C、实时计算

D、BI分析

Hadoop的大数据层主要设计用于处理大规模数据集，其核心功能包括数据存储（如HDFS）、数据处理（如MapReduce）以及支持离线分析（Batch Processing）。数据挖掘和BI（商业智能）分析通常是在处理后的数据上进行的，可以利用Hadoop处理后的结果来进行更深入的分析。

实时计算（Real-time Computing）通常不属于Hadoop的传统功能范畴。Hadoop最初是为了批处理设计的，对于实时数据处理并不是最优选择。实时计算通常需要低延迟的处理能力，这是Hadoop的MapReduce模型所不擅长的。对于实时计算需求，通常会使用如Apache Storm、Apache Flink或Apache Kafka Streams等其他技术。不过，随着Hadoop生态系统的发展，现在也有一些工具如Apache Spark可以提供近实时（Near Real-Time）的处理能力。

在一个基本的Hadoop集群中，DataNode主要负责什么？

A、负责执行由JobTracker指派的任务

B、协调数据计算任务

C、负责协调集群中的数据存储

D、存储被拆分的数据块

在一个基本的Hadoop集群中，DataNode主要负责存储实际的数据块。Hadoop分布式文件系统（HDFS）将大文件分割成多个数据块，并将这些数据块分布存储在集群中的多个DataNode上。每个DataNode负责管理存储在其节点上的数据块的读写操作，并定期向NameNode报告其存储的数据块的状态。

 A、负责执行由JobTracker指派的任务 - 这是TaskTracker的角色，在Hadoop 1.x中负责执行由JobTracker分配的MapReduce任务。

B、协调数据计算任务 - 这通常是JobTracker（在Hadoop 1.x中）或ResourceManager（在Hadoop 2.x及以上版本中的YARN组件）的职责。

C、负责协调集群中的数据存储 - 这是NameNode的角色，它管理文件系统的命名空间和调节客户端对文件的访问。

下面哪个是Hadoop2.0的组件？

A、ResourceManager

B、JobTracker

C、TaskTracker

D、NodeManager

ResourceManager是YARN（Yet Another Resource Negotiator）的核心组件之一，负责集群资源的全局管理和调度。它取代了Hadoop 1.0中的JobTracker，将资源管理和作业调度分离，提高了集群的扩展性和灵活性。NodeManager是YARN的另一个核心组件，负责管理单个节点上的资源，并执行来自ResourceManager和ApplicationMaster的任务。它与Hadoop 1.0中的TaskTracker类似，但在YARN中功能更加模块化和灵活。而以下组件属于Hadoop 1.0，在Hadoop 2.0中已被取代或重构： JobTracker是Hadoop 1.0中的核心组件，负责资源管理和作业调度。在Hadoop 2.0中，其功能被ResourceManager和ApplicationMaster取代。 TaskTracker是Hadoop 1.0中的组件，负责执行具体的任务。在Hadoop 2.0中，其功能被NodeManager取代1012。

一个基本的Hadoop集群中的节点主要包括什么？

A、DataNode：存储被拆分的数据块

B、JobTracker：协调数据计算任务

C、TaskTracker：负责执行由JobTracker指派的任务

D、SecondaryNameNode：帮助NameNode收集文件系统运行的状态信息

Hadoop集群的整体性能主要受到什么因素影响？

A、CPU性能

B、内存

C、网络

D、存储容量