HADOOP-HDFS-APl(第20天)

目录

一、Hadoop_HDFS_APl参数优先级

二、Hadoop_HDFS_APl文件下载


在http://hadoop102:9870/网址不能删除文件和不能修改副本的解决办法

第一步:

第二步:

第三步:

 

 

 

一、Hadoop_HDFS_APl参数优先级

在resources目录下创建一个文件hdfs-site.xml

 在文件hdfs-site.xml中插入如下内容

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>

在D盘创建一个文件,命名位sunwukong.txt;复制文件相对应的路径

运行一下上传代码

http://hadoop102:9870/在网址上查看一下sunwukong.txt文件对应的副本数为1则运行正确

编写源代码;在源代码:连接集群地址那添加如下内容

configuration.set("dfs.replication", "2");

再次 运行一下上传代码

 http://hadoop102:9870/在网址上查看一下sunwukong.txt文件对应的副本数为2则运行正确

结论:参数优先级排序:(1)客户端代码中设置的值 >(2)在项目资源项目下的配置文件 >(3)然后是服务器的自定义配置(hdfs-site.xml)>(4)服务器的默认配置(hdfs-default.xml)

二、Hadoop_HDFS_APl文件下载

在HdfsClient.java文件中添加如下代码

@Test
    public void testGet() throws IOException {
        //参数的解读:参数一:原文件是否删除;参数二:原文件路径HDFS;参数三:目标地址路径windows;参数四:
        fs.copyToLocalFile(true,new Path("hdfs://hadoop102/xiyou/huaguoshan"),new Path("D:\\"),false);

    }

 详细参数解读:

boolean delSrc 指是否将原文件删除

Path src 指要下载的文件路径

Path dst 指将文件下载到的路径

boolean useRawLocalFileSystem 是否开启文件校验

如果delSrc:true

则在http://hadoop102:9870/网址上的文件则被删除了

效验文件:意思是数据传送时采用的一种校正数据错误的一种方式。

useRawLocalFileSystem是否开启文件校验

 

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值