- 博客(1)
- 资源 (8)
- 收藏
- 关注
RSS订阅转载 RabbitMQ实战-高级特性
https://developer.aliyun.com/article/706962?utm_content=g_1000075447
2019-09-09 11:28:04
110
Git-2.21.0-32-bit
GIt版本管理工具 Git Windows 2.21.0 32位 创建新仓库 创建新文件夹，打开，然后执行 git init 以创建新的 git 仓库。
2019-04-09
[免费]hadoop-eclipse-plugin-2.6.0.jar
linux环境下大数据：
HDFSZ在写入数据的时候会计算数据的校验和，针对每个由dfs.bytes.per.checksum指定字节的数据计算校验和，默认为512个字节
当客户端读取数据的时候，会对数据的校验和进行检查，如果发现数据出现损坏，则会执行以下步骤：
1.向Namenode报告其正在读取的数据块和所在的Datanode，之后会抛出ChecksumException异常
2.Namenode会将高数据块标记为损坏，让其不再处理请求，或者将该数据块复制到其他节点上
3.Namenode安排该数据块的其他完整的副本复制一份到其他完好的节点上，如此系统中的副本数恢复到期望值
在使用FileSystem的open方法之前，可以通过setVerifyChecksum(false)方法将校验过程停用
2017-09-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人