操作HDFS时出现报错NativeCrc32.nativeComputeChunkedSumsByteArray (II[BI[BIILjava/lang/String；JZ)V的解决

最新推荐文章于 2021-11-15 11:20:37 发布
最新推荐文章于 2021-11-15 11:20:37 发布
阅读量727 收藏
点赞数
分类专栏： hadoop 文章标签： java hdfs
原文链接：https://blog.csdn.net/weixin_33856370/article/details/93237117?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522160319274319195264752286%2522%252C%2522scm%2522%253A%252220140713.130102334.pc%255Fall.%2522%257D&request_id=160319274319195264752286&bi
版权

和别人同样的win10系统，同样的配置文件，别人都能访问的hadoop，我本地却怎么都访问不了，后台一直报:
org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray (II[BI[BIILjava/lang/String;JZ)V

上网仔细搜索了一下，原来是和我的操作系统有关系，执行以下操作后立马解决：
把hadoop.dll和winutil.exe两个文件放到到C:\windows\system32 里，如果已经存在，就直接覆盖。

文件可以去https://github.com/steveloughran/winutils上下载，自行选择对应的hadoop版本。

在这里插入图片描述

wysghmbb
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Flink】UnsatisfieldlinkError : org.apache.hadoop.util.NativeCrc32
九师兄
07-01 932
1.背景 在idea和eclipse中调试hadoop中hdfs文件，之前好好的，结果突然就出现java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 的报错，查询网上的各种资料之后都说：“需要选择正确的版本并且在 Hadoop/bin和 C：\windows\system32 上添加/替换 ‘ha.
【kettle集成cdh6.1】hadoop file output浏览目录报错：java.lang.NoClassDefFoundError: com/ctc/wstx/io/SystemId
01-07
【kettle集成cdh6.1】外部数据源读写hdfs若干错前言环境报错问题分析解决办法后记 前言 最近试着上手了一下kettle，搭建过程很简单，就是下载个包解压一下，但是在配置数据源的过程中着实踩了不少坑，这里记录一下。...
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.
qq_41544550的博客
04-03 381
在运行Spark程序写出文件(savaAsTextFile)的时候，遇到了这个错误： java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. 也有可能是下面这种错误： java.lang.UnsatisfiedLinkError: org.apache.h...
java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSums
一只菜鸡
08-01 815
Exception in thread “main” java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 这个错误是因为无法连接Hadoop所导致的 检查以下几点： Hadoop进程是...
NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String；JZ)V 报错
weixin_45879334的博客
03-01 303
从 该链接 查找相应的hadoop文件夹，并下载bin目录下的 hadoop.dll 和 winutil.exe 。 将下载后的两个文件放到 C:\Windows\System32 目录下，解决。
scala问题：Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeC
qq_44817611的博客
11-15 1665
scala问题：Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 报错详情： Caused by: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunked
java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray
Constantdropping的博客
11-29 2442
 java客户端连接HDFS报错： Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V  在网上查找原因后，发现这是由于hadoo...
HDFS上传文件报错org.apache.hadoop.fs.ChecksumException: Checksum error: file:/hyk/data/hyk.txt
01-07
当从本地上传文件到HDFS中时报错 fs.FSInputChecker: Found checksum error: b[0, 69]=6d6f77656968616861686168616868616686168616861686861680a org.apache.hadoop.fs.ChecksumException: Checksum error: file:/...
hbase 启动regionserver日志报错： Wrong FS: hdfs:// .regioninfo, expected: file:///
08-14
NULL 博文链接：https://bnmnba.iteye.com/blog/2322332
hadoop2.7.dll
02-05
在widows开发hadoop程序时报相关 nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 的错误 下载好把相关文件覆盖到hadoop目录下的bin中
hadoop格式化HDFS出现错误解决办法
09-30
主要介绍了hadoop格式化HDFS出现错误解决办法的相关资料,hadoop格式化HDFS报错java.net.UnknownHostException，这里提供解决办法，需要的朋友可以参考下
org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String；JZ)
weixin_44347111的博客
09-12 592
通过java连接hdfs的时候，报了上面出现的问题，甚是头秃，下面给出解决办法 百度发现是自己操作系统的问题，需要将把hadoop.dll和winutil.exe两个文件放到到C:\windows\system32 里，如果已经存在，就直接覆盖。 下载地址：https://github.com/steveloughran/winutils上下载，自行选择对应的hadoop版本。 大家自行选择需要的版本，从里面挑出hadoop.dll和winutil.exe两个文件放到到C:\windows\sy..
Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeCo
Jornici的博客
09-18 1500
Exceptionin thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V     这是由于hadoop.dll 版本问题，2.4之前的和自后的需要的不一样
hadoop 在windows开发环境遇到的问题
love13135816的专栏
09-14 226
在windows开发环境中 访问 远端hdfs时 可能会出现 org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 等错误.原始是在windows环境中 缺少 hadoop.dll 文件. 下载  https://download.csdn.n...
java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray
baidu_21349635的专栏
06-08 1673
/** * 上传 */ @Test public void putHDFS() throws IOException, URISyntaxException, InterruptedException { //创建配置信息 Configuration conf = new Configuration(); //...
Hadoop实战（二），org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray
kngines
04-10 6132
场景描述 探索Hadoop开发经验，从而进一步理解Haddoop源码设计及核心思想 实验环境 伪分布式 hadoop 2.6.4 实验内容 打印HDFS目录信息 在HDFS中新建文件 写入中英文数据 代码实现 具体包、配置不在详述 . package hadoop; import java.io.IOException; import java.io.InputStrea...
Exception in thread “main“ java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeC
long47630103的博客
08-25 227
问题描述： 使用spark读取HDFS上文件时报错 Exception in thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V 原因分析： 注意如果这个hadoop.dll的版本要和hadoop的一致，可以稍微高一点，低了可能就会报这个异常 解决方案： .
./bin/hdfs dfs -put ./etc/hadoop/*.xml input
最新发布
04-03
The command "./bin/hdfs dfs -put ./etc/hadoop/*.xml input" is used to copy all the XML files located in the "./etc/hadoop/" directory to the "input" directory in HDFS (Hadoop Distributed File System)....

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值