lzo悲催的安装

最新推荐文章于 2022-10-14 14:13:49 发布
最新推荐文章于 2022-10-14 14:13:49 发布
阅读量267 收藏
点赞数
分类专栏： mapreduce 文章标签： lzo安装
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/guiyuguiyu/article/details/84474708
版权

java.lang.UnsatisfiedLinkError: no gplcompression in java.library.path

at java.lang.ClassLoader.loadLibrary(ClassLoader.java:1738)

at java.lang.Runtime.loadLibrary0(Runtime.java:823)

at java.lang.System.loadLibrary(System.java:1028)

at com.hadoop.compression.lzo.GPLNativeCodeLoader.<clinit>(GPLNativeCodeLoader.java:32)

at com.hadoop.compression.lzo.LzoCodec.<clinit>(LzoCodec.java:71)

at java.lang.Class.forName0(Native Method)

at java.lang.Class.forName(Class.java:247)

at org.apache.hadoop.conf.Configuration.getClassByNameOrNull(Configuration.java:1526)

at org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:1491)

at org.apache.hadoop.io.compress.CompressionCodecFactory.getCodecClasses(CompressionCodecFactory.java:127)

at org.apache.hadoop.io.compress.CompressionCodecFactory.<init>(CompressionCodecFactory.java:174)

at org.apache.hadoop.fs.shell.Display$Text.getInputStream(Display.java:129)

at org.apache.hadoop.fs.shell.Display$Cat.processPath(Display.java:81)

at org.apache.hadoop.fs.shell.Command.processPaths(Command.java:306)

at org.apache.hadoop.fs.shell.Command.processPathArgument(Command.java:278)

at org.apache.hadoop.fs.shell.Command.processArgument(Command.java:260)

at org.apache.hadoop.fs.shell.Command.processArguments(Command.java:244)

at org.apache.hadoop.fs.shell.Command.processRawArguments(Command.java:190)

at org.apache.hadoop.fs.shell.Command.run(Command.java:154)

at org.apache.hadoop.fs.FsShell.run(FsShell.java:254)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)

at org.apache.hadoop.fs.FsShell.main(FsShell.java:304)

13/08/30 19:12:23 ERROR lzo.LzoCodec: Cannot load native-lzo without native-hadoop

-text: Fatal internal error

java.lang.RuntimeException: native-lzo library not available

at com.hadoop.compression.lzo.LzopCodec.createDecompressor(LzopCodec.java:104)

at com.hadoop.compression.lzo.LzopCodec.createInputStream(LzopCodec.java:89)

at org.apache.hadoop.fs.shell.Display$Text.getInputStream(Display.java:133)

at org.apache.hadoop.fs.shell.Display$Cat.processPath(Display.java:81)

at org.apache.hadoop.fs.shell.Command.processPaths(Command.java:306)

at org.apache.hadoop.fs.shell.Command.processPathArgument(Command.java:278)

at org.apache.hadoop.fs.shell.Command.processArgument(Command.java:260)

at org.apache.hadoop.fs.shell.Command.processArguments(Command.java:244)

at org.apache.hadoop.fs.shell.Command.processRawArguments(Command.java:190)

at org.apache.hadoop.fs.shell.Command.run(Command.java:154)

at org.apache.hadoop.fs.FsShell.run(FsShell.java:254)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)

at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)

at org.apache.hadoop.fs.FsShell.main(FsShell.java:304)

guiyuguiyu
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hadoop安装lzo-出现Could not load native gpl library问题解决
零度
10-06 8398
此篇是接着hadoop安装lzo的续篇，主要讲一下安装过程中出现的问题及解决方案. Could not load native gpl library  异常堆栈： 12/11/07 10:15:02 ERROR lzo.GPLNativeCodeLoader: Could not load native gpl library java.lang.UnsatisfiedL
windows环境安装lzo和python-lzo
qq_40112386的博客
12-15 5309
windows环境安装lzo和python-lzo概述应用版本Windows环境安装lzo安装python-lzo插件快速安装代码示例导出与导入导出导入 近期因python项目开发中涉及到lzo文件解压，需要在windows环境下使用python-lzo压缩工具，但网上相关资料少之又少，遂自行研究相关安装步骤和使用方法。PS：涉及到lzo和python-lzo安装的很多坑。 概述 LZO 是致力于...
java.lang.UnsatisfiedLinkError: no xxx in java.library.path
Wang__dream的博客
10-14 3100
window 环境只能加载 dll文件，linux 加载so文件 （之前别人给的接口，只给了so文件，而我在window上测试，一直报库找不到。一般这是引入dll或者so的文件出现的，设置好java.library.path就好。IDEA 中 -Djava.library.path=/opt/xx/libs。
测试报错:java.lang.UnsatisfiedLinkError: no attach in java.library.path解决方案
AzeShinja的博客
07-13 1694
在你的测试类里面右键 Run as - > Run configuration 点击JRE这一栏后 把你的JRE 改成JDK， 如果没有JDK选项 那就再右面install一下就可以了 我也是看别人这么说自己弄了一下就解决了， 所以分享出来
遇到的问题及解决思路
大JAVA解决方案
04-19 2090
Spark on Yarn遇到的问题及解决思路 [复制链接]  pig21781主题2768帖子1万积分超级版主积分16951收听TA发消息电梯直达楼主 发表于 2014-10-8 00:05:11 | 只看该作者 |只看大图 about云hadoop日志分析问题导读1.Connection Refused可能原因是什么？2.如何判断内存溢出，该如何解决？扩展：3.你认为/etc/hosts配置错...
lzo.zip_lzo
09-23
LZO（Lempel-Ziv-Oberhumer）是一种数据压缩算法，由V. Lempel、J. Ziv和M. Oberhumer在1986年开发。这个算法以其快速、简单以及对内存需求较低的特点而闻名，特别适合于嵌入式系统和实时应用。"lzo.zip_lzo"可能是...
lzo-2.10.zip
08-01
LZO（Lempel-Ziv-Oberhumer）是一种数据压缩算法，由V. Lempel、A. Ziv和M. Oberhumer在1986年提出。这个算法以其快速、简单和低内存需求著称，尤其适用于嵌入式系统和实时应用。在"LZO-2.10.zip"这个压缩包中，我们...
lzo.zip_lzo_zip
09-24
《LZO压缩与ZIP封装技术详解》 LZO（Lempel-Ziv-Oberhumer）是一种快速且无损的数据压缩算法，由Vladimir Lempel、Jacob Ziv和Peter Oberhumer等人开发。它以其高效、轻量级和易于实现的特点，在嵌入式系统和实时...
hadoop集群内lzo的安装与配置
07-01
Hadoop 集群内 LZO 的安装与配置 LZO 是一种高效的压缩算法，广泛应用于大数据处理和存储领域。Hadoop 集群中使用 LZO，可以提高数据处理速度和存储效率。本文将详细介绍如何在 Hadoop 集群中安装和配置 LZO。 一...
regcache-lzo.rar_lzo
09-24
在“regcache-lzo.rar_lzo”这个主题中，我们主要关注的是注册缓存（Register Cache）与LZO压缩支持的结合。 注册缓存通常是指CPU内部的一种高速缓存机制，用于存储最近频繁使用的寄存器值，以减少访问主存的次数。...
java hbase创建_Hbase故障处理汇总及评注
weixin_39712865的博客
11-21 970
1.启动故障1、如果启动hbase集群出现regionserver无法启动，日志报告如下类似错误时，说明是集群的时间不同步，只需要同步即可解决。FATAL org.apache.hadoop.hbase.regionserver.HRegionServer: ABORTING region server 10.210.78.22,60020,1344329095415: Unhandled exc...
java.lang.UnsatisfiedLinkError：no dll in java.library.path
weixin_30611509的博客
12-20 469
报错：java.lang.UnsatisfiedLinkError：no dll in java.library.path 参考： Java调用Dll时，会出现no dll in java.library.path异常，在Java Project中不常见，因为只要将Dll拷贝到system32目录下即可； 但若是在Web Project中则经常遇见，因为Web Proje...
运行报错： java.lang.UnsatisfiedLinkError: no jcef in java.library.path
qq_30346413的博客
07-16 2335
今天在引入库文件时，包了找不到 jcef 的路径。报错如下 java.lang.UnsatisfiedLinkError: no jcef in java.library.path 使用的软件和环境如下: 系统：Ubuntu 软件：interllij 语言：Java + kotlin Exception in thread "main"...
java.lang.UnsatisfiedLinkError：no XXX in java.library.path
caozhewei的博客
07-08 1205
java.lang.UnsatisfiedLinkError: no XXX in java.library.path 记录一次java 调用第三方 DLL异常说明java.lang.UnsatisfiedLinkError: no XXX in java.library.pathjava.lang.UnsatisfiedLinkError: D:\xxx\xxx-JNI\xxx\mine.dll: Can't find dependent libraries其他 说明 工具 IntelliJ IDEA 2
使用Snappy 压缩方式报错“java.lang.UnsatisfiedLinkError: no snappyjava in java.library.path”...
weixin_30741653的博客
08-08 492
情况描述 其实这个问题已经困扰我很久了，最近在公司Linux上搭建hadoop 和 spark环境的时候，我就遇到 spark提交作业到yarn 集群就报错这个错，当时已经安装snappy环境了，任何关于snappy静态库都编译了，这是我提交到spark mail list上的http://apache-spark-user-list.1001560.n3.nabble.co...
Kubernetes（Docker）容器部署加载不到 .so动态链接文件（java.lang.UnsatisfiedLinkError: no xxx in java.library.path）
专注基础架构领域
10-22 8621
找了一下午，网上文章有很多，但都不适用，因为我是通过容器进行部署服务，然后容器加载.so动态链接文件，所以网上大多数文章是设置Linux的动态链接目录，这里统一记录一下解决方法： 1、Linux设置LD_LIBRARY_PATH环境变量 普通的 Jar 包加载 .so 可以通过设置动态链接目录的方式来找到动态链接文件 $ vim /etc/profile $ export LD_LIBRA...
java.lang.UnsatisfiedLinkError: no rxtxSerial in java.library.path
热门推荐
游海东的技术专栏
03-16 2万+
1、错误描述java.lang.UnsatisfiedLinkError: no rxtxSerial in java.library.path thrown while loading gnu.io.RXTXCommDriver 2017-03-16 09:29:48.073:WARN:oejuc.AbstractLifeCycle:FAILED o.e.j.w.WebAppContext{/s
Java项目调用hadoop-lzop报错：native-lzo library not available
u013933879的博客
08-03 4520
Java项目调用hadoop-lzop报错：native-lzo library not available 服务器环境已安装好所有Hadoop相关的内容，但在java项目中使用hadoop-lzop的功能时依然报错 错误内容： java.lang.RuntimeException: native-lzo library not available at com.hado...
【Hadoop/Hbase】centos上安装并设置Snappy/LZO压缩方式
zwan0518的专栏
07-30 8399
在hadoop和hbase文件传输可以在压缩之后在进行传输，这样就可以在传输的时候减少传输数据，增大I/O和带宽效率。在hadoop中主要提供了三种压缩方式Gzip、LZO、Snappy三种数据压缩。后面两种需要额外的配置和安装依赖。但是，在hadoop中默认都已经实现接口。
python安装lzo失败
最新发布
07-06
当你尝试在Python环境中安装LZO库时遇到失败，可能是由于多种原因导致的。LZO是一种数据压缩算法，Python通过`lzma`模块提供其支持。以下是可能导致安装失败的一些常见情况及解决方法： 1. **缺失依赖**：确保你的系统已经安装了构建LZO所需的工具包，如`automake`, `autoconf`, 和 `libtool`。对于Debian或Ubuntu用户，可以尝试运行`sudo apt-get install build-essential liblzma-dev`。 2. **版本兼容问题**：检查你的Python版本，因为有些旧版本的Python可能不支持LZO。如果是这种情况，升级到最新版Python可能会解决问题。 3. **第三方包错误**：如果你是从pip源而非默认仓库安装，确认pip源是否稳定，网络连接良好。有时候，错误的镜像或者网络中断都可能导致安装失败。 4. **已安装的包冲突**：如果系统里有其他软件包干扰了LZO的安装，尝试卸载后再重新安装。 5. **环境变量设置不当**：确保`./configure` 和 `make` 等命令可以在你的环境下正确执行，这通常涉及到`PATH`环境变量。 6. **权限问题**：如果在根目录下安装，可能需要管理员权限。 如果上述步骤都无法解决问题，你可以尝试使用虚拟环境（venv或conda）隔离Python环境，并在该环境中安装，或者查看LZO的官方文档，看是否有特定于平台的安装指南。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值