Hadoop 面试题（七）

1. 简述以下选项中不参与hdfs写流程的组件是 ？

A：Client
B：DistributedFileSystem
C：NameNode
D：YARN

不参与HDFS写流程的组件是 D：YARN。

以下是对每个选项的简述：

A: Client —— Client是发起写操作的起点，它与HDFS的写流程密切相关，负责向HDFS发送写请求。

B: DistributedFileSystem —— DistributedFileSystem是HDFS的客户端API，为用户提供了操作HDFS的接口。在Client与HDFS交互时，DistributedFileSystem会参与写流程。

C: NameNode —— NameNode是HDFS的主控节点，负责管理文件系统的命名空间。在写流程中，Client首先需要与NameNode通信，以确定数据块的存储位置。

D: YARN —— YARN（Yet Another Resource Negotiator）是Hadoop的资源管理器，负责管理和调度集群资源。虽然YARN在MapReduce作业执行中扮演重要角色，但它并不直接参与HDFS的写流程。HDFS的写流程主要涉及Client、NameNode和DataNode。

因此，YARN与HDFS的写流程无直接关系，它是独立于HDFS的另一组件，主要负责作业调度和资源分配。

2. 简述下列哪一个组件不是Hadoop系统的组件之一（） ？

A：NameNode
B：Client
C：DataNode
D：JobManager

选项D：JobManager 不是Hadoop系统的组件之一。

以下是对每个选项的简述：

A: NameNode —— NameNode是Hadoop HDFS架构中的主节点，负责存储文件系统的命名空间和元数据。

B: Client —— Client在Hadoop中指的是与集群交互的客户端应用程序，用于提交作业或访问HDFS。

C: DataNode —— DataNode是Hadoop HDFS中的工作节点，负责存储实际的数据块，并执行数据的读写操作。

D: JobManager —— JobManager是Apache Flink中的一个组件，负责管理和调度Flink作业的执行。它不是Hadoop生态系统的一部分。在Hadoop中，与作业调度相关的组件是JobTracker（在Hadoop 1.x中）或ResourceManager（在Hadoop 2.x及更高版本中）。

因此，JobManager与Hadoop系统无直接关联，而是属于另一个分布式计算框架Apache Flink。

3. 简述有关Hadoop的高可用下列描述错误的是（） ？

A：Hadoop集群中有Active NameNode和StandbyNameNode；其中Active NameNode和StandbyNameNode节点互为主备
B：Active NameNode提供读写服务，StandbyNameNode节点只提供读服务
C：主备切换控制器ZKFC，ZKFailoverController作为独立运行的进程，对NameNode的主备切换进行总体控制
D：ZKFailoverController主要以心跳的方式检测NameNode的健康状况，在Active NameNode故障时借助Zookeeper实现自动的主备选举和切换

描述错误的是：

B：Active NameNode提供读写服务，StandbyNameNode节点只提供读服务 - 这个描述是错误的。在Hadoop的高可用性配置中，Standby NameNode并不是用来提供读服务的，而是用来接收来自Active NameNode的编辑日志和文件系统映像的更新，以便在Active NameNode故障时能够接管成为新的Active NameNode。Standby NameNode在正常情况下不处理客户端的读写请求。

其他选项的说明：

A：Hadoop集群中有Active NameNode和StandbyNameNode；其中Active NameNode和Standby NameNode节点互为主备 - 这个描述是正确的。Active NameNode处理所有的读写操作，而Standby NameNode同步Active NameNode的状态，准备在故障时接管。

C：主备切换控制器ZKFC，ZKFailoverController作为独立运行的进程，对NameNode的主备切换进行总体控制 - 这个描述是正确的。ZKFailoverController（ZKFC）是一个独立的守护进程，用于监控NameNode的状态，并在Active NameNode故障时触发故障转移。

D：ZKFailoverController主要以心跳的方式检测NameNode的健康状况，在Active NameNode故障时借助Zookeeper实现自动的主备选举和切换 - 这个描述也是正确的。ZKFC通过ZooKeeper进行协调，使用心跳机制来检测NameNode的健康状态，并在需要时自动执行主备切换。

4. 简述关于安全模式命令，正确的是（） ？

A：退出安全模式：hadoop dfsadmin -safemode leave
B：退出安全模式：hadoop dfs -safemode leave
C：进入安全模式：hadoop dfs -safemode enter
D：进入安全模式：hadoop dfsadmin enter

正确的命令是：

A：退出安全模式：hadoop dfsadmin -safemode leave - 这个命令用于退出HDFS的安全模式。

其他选项的说明：

B：退出安全模式：hadoop dfs -safemode leave - 这个命令格式不正确，应该使用dfsadmin子命令而不是dfs。

C：进入安全模式：hadoop dfs -safemode enter - 这个命令格式不正确，通常不需要手动进入安全模式，HDFS会在启动时自动进入或退出安全模式。

D：进入安全模式：hadoop dfsadmin enter - 这个命令缺少了-safemode参数，正确的命令是hadoop dfsadmin -safemode enter。

因此，正确答案是A。使用hadoop dfsadmin -safemode leave可以退出HDFS的安全模式。如果想要进入安全模式，应该使用hadoop dfsadmin -safemode enter。

5. 简述下列关于Hadoop架构组件描述错误的是() ？

A：NameNode管理多个DataNode节点以及客户端请求
B：Client是用户提交计算作业的入口
C：MySQL和YARN也是Hadoop生态的常用的生产环境必要组件
D：DataNode负责处理客户端计算作业的读写请求

描述错误的是：

C：MySQL和YARN也是Hadoop生态的常用的生产环境必要组件 - 这个描述是错误的。YARN（Yet Another Resource Negotiator）是Hadoop的资源管理器，确实是Hadoop生态系统的一部分，用于作业调度和集群资源管理。然而，MySQL是一个关系数据库管理系统，并不是Hadoop生态系统的一部分，也不是Hadoop运行的必要组件。虽然在某些情况下，人们可能会使用MySQL来存储Hadoop集群的元数据或用于其他目的，但它不是Hadoop架构的直接组成部分。

其他选项的说明：

A：NameNode管理多个DataNode节点以及客户端请求 - 这个描述是正确的。NameNode是HDFS架构中的主节点，负责管理文件系统的命名空间和客户端对文件的访问。

B：Client是用户提交计算作业的入口 - 这个描述是正确的。Client通常指的是用户或应用程序提交作业到Hadoop集群的接口。

D：DataNode负责处理客户端计算作业的读写请求 - 这个描述部分正确，但可能会引起误解。DataNode确实处理客户端的读写请求，但主要是针对数据存储而言的。计算作业的处理是由MapReduce框架或YARN等计算框架负责的，而不是直接由DataNode处理。DataNode主要负责数据存储和检索。

6. 简述请问以下哪个命令组成是错误的（） ？

A：sbin/stop-dfs.sh
B：sbin/hdfs dfsadmin -report
C：bin/hadoop namenode -format
D：bin/hadoop fs -cat /hadoopdata/my.txt

命令组成错误的是：

C：bin/hadoop namenode -format - 这个命令格式是错误的。正确的命令应该是使用hdfs命令而不是hadoop namenode，并且格式化NameNode的命令是-initializeSharedEdits或-fsck，而不是-format。正确的格式化NameNode的命令是：

bin/hdfs namenode -initializeSharedEdits

或者使用文件系统检查命令：

bin/hdfs fsck /

其他选项的说明：

A：sbin/stop-dfs.sh - 这个命令是正确的，用于停止HDFS守护进程。

B：sbin/hdfs dfsadmin -report - 这个命令是正确的，用于获取HDFS集群的状态报告。

D：bin/hadoop fs -cat /hadoopdata/my.txt - 这个命令是正确的，用于查看HDFS上指定文件的内容。注意，命令中的路径/hadoopdata/my.txt应该根据实际文件在HDFS上的路径进行调整。