当使用Flume并尝试使用lzop时，可能会遇到'native-lzo library not available'的错误。这个问题通常是由于Java的library.path中未包含Hadoop的native编译包导致。解决方法是在Linux环境变量中添加java.library.path，指向Hadoop的native路径，并确保将hadoop-lzop.jar添加到CLASSPATH。
1.验证安装环境（以root账户执行）：
sudo yum -y install lzo-devel zlib-devel gcc autoconf automake libtool
2.通常问题是在java.library.path中没有找到hadoop的native编译包导致，解决方案是在linux的环境变量中增加一项配置
[lzh@hadoop102 ~]$ sudo vi /etc/profile
给java.library.path增加hadoop的native路径，以便程序可以正常加载
export LD_LIBRARY_PATH={你的hadoop路径}/lib/native
//然后增加hadoop-lzop.jar包的CLASSPATH地址
export CLASSPATH=$CLASSPATH:{你的hadoop-lzop.jar的地址}
我这里是
export LD_LIBRARY_PATH=/opt/module/hadoop-2
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
