java Checksum接口来验证跨hdfs集群传输文件的正确性
背景说明
项目中,为了减少备份机房hdfs namenode内存压力,将采集文件压缩成tar,再传输至备份机房。在此期间,为了确保跨集群传输tar包的正确性,在生成tar文件时,需要生成crc32值。下面给出了java生成crc32值的代码。
具体代码实现
public interface IChunkSum extends Checksum
{
/**
* 获取校验值
...
原创
2019-09-04 18:30:06 ·
362 阅读 ·
0 评论