HDFS安全模式

理解HDFS安全模式

最新推荐文章于 2025-02-27 13:33:41 发布

原创

最新推荐文章于 2025-02-27 13:33:41 发布 · 739 阅读

0 ·

CC 4.0 BY-SA版权

本文介绍了Linux下HDFS的安全模式，详细讲述了在安全模式下HDFS的行为，如仅允许读取不支持写入，并且在读取完成后会自动退出安全模式。同时，提供了开启HDFS模式的三个步骤，包括配置文件的下载位置和编写HDFS文件。还列举了可能遇到的错误及解决方法。

Liunx下的HDFS安全模式：

HDFS启动的时候会先进入安全模式：

安全模式下，主要是读取存储在本地的文件
安全模式下，不允许对HDFS进行操纵
当读取完所有数据之后，安全模式会自动关闭

开启HDFS模式

第一步：在/opt/modules/hadoop-2.7.3/etc/hadoop找到core-site.xml和hdfs-site.xml下载下来，下载到hadoop项目的main下resources中

第二步：编写HFDS文件：

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

import java.io.IOException;

/**
 * 需要操作HDFS，需要找到NameNode
 * NameNode是一个服务
 * 主机名+端口
 */
publi