使用 HDFS 的 Restful 接口下载中文名文件,以及给HDFS上传文件报错

Windows 本地下载 HDFS 文件时

  • 如果下载的是英文名的文件,不会报错
  • 若是下载的是中文名的文件,则会报错(文件内容有报错信息)。

下载链接

curl -L -o Windows本地的目录/下载后的文件名 http://HDFS的IP:50070/webhdfs/v1/需要下载文件的HDFS目录/文件名?op=OPEN
注意:若指定链接中的下载后的文件名和HDFS中的文件名一致,受影响的只是文件名,文件内容不会受影响

下载的是中文名的文件,会报错的原因是:Windows 系统默认是采用的 GBK 编码,而 LinuxHDFS 采用的是UTF-8

在给 HDFS 上传文件的时候,如果是文件是由 Windows 本地上传到 Linux 本地的,而且还有中文名,那它也会报错,乱码,使用下面的方式可以将中文名的编码改为 UTF-8 然后再上传

文件名的转换,参照这种方式

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值