报错- Hadoop下core-site配置压缩参数后测试失败

背景

CentOS7.5中三台机器(hadoop102、hadoop103、hadoop104)的hadoop集群

问题描述

hadoop采取lzo压缩,将相关jar包上传至hadoop-3.1.3/share/hadoop/common文件下后,再配置core-site.xml参数,后续测试
压缩发送错误

报错代码

java.lang.IllegalArgumentException: Compression codec 
 org.apache.hadoop.io.compress.GzipCodec not found.

Caused by: java.lang.ClassNotFoundException: 
Class org.apache.hadoop.io.compress.GzipCodec not found

产生原因

对io.compression.codecs参数的value使用了空格,换行等等

解决方案

将空格或者是换行全部删除,改成如下:

<value>org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.DefaultCodec,org.apache.hadoop.io.compress.BZip2Codec,org.apache.hadoop.io.compress.SnappyCodec,com.hadoop.compression.lzo.LzoCodec,com.hadoop.compression.lzo.LzopCodec</value>

我是dyson不只是吹风机,若是对大数据-数据仓库技术感兴趣的可以加我沟通交流,一起进步。VX:daijun1211

ps:若文章侵权、触犯隐私请联系作者删除,谢谢~~

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值