2024年最全校验算法总结(1),实战解析

img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以戳这里获取

11001001


#### 优点


LRC的优点是成本比奇偶校验更低,因为数据与校验的比例更大,所以传输的时候可以传输更多的数据和更少的校验值。在射频卡上使用也是这个原因,射频卡系统的资源非常有限,所以尽量采用低成本的方式。即使一般射频卡的噪声远大于常规有线传输,但是它的重发成本更低,后果也更轻,一次没有刷上大不了再刷一次,所以影响并不大。


#### 缺点


LRC的缺点和单向奇偶校验一样,甚至更明显,因为它的数据与校验的比例更大,出现多重错码的概率更大。




---


## 整数加法校验和


整数加法校验和(Integer Addition Checksum),也就是最基本的Checksum算法,是很常用的校验方法。整数加法校验和也是一种纵向校验方法,生成一字节的校验码。


#### 基本算法


整数加法校验和的基本算法非常简单,就是直接累加每个要传输的字节。全部累加之后,获得的结果就是校验码。需要注意的是,这里用的是正常的带进位加法,需要进位多少就正常进位。除了最高一位,进位被舍弃,因为校验码无论是由多少个字节生成的,都只有一字节长度。


#### 优点


这一算法的优点是简单,因为是连续加法,所以并行运算也并不难做到,而且加法运算量本身不大,比较好实现。同时,Checksum方法不仅能够检出奇数个错码,还能检出2个错码(因为会由进位把错误传递到下一位),或其他更多的错码,除非错误被直接传递到了省略部分。


#### 缺点


这一算法也有缺点,首先就是因为错误的上浮,不能知道究竟是哪里出现错码,也不能定位是第几个字节出现问题。同时,也存在错码被传递到被忽略部分,也就是最高位进上去的部分而不能检出错码的情况。




---


## 异或校验


【异或校验】与【校验和】类似,对数据进行“异或”,最终得到一个“异或值”。



uint8_t CheckXOR(uint8_t *Buf, uint8_t Len)
{
uint8_t i = 0;
uint8_t x = 0;

for(i=0; i<Len; i++)
{
x = x^(*(Buf+i));
}

return x;
}


校验和、异或校验的方式有很多种,比如有的还会传入一个参数作为异或校验的值。


当然,以上代码仅供学习参考,实际应用需结合项目情况修改代码。




---


## CRC校验


已剪辑自: https://mp.weixin.qq.com/s/Dh9jwSo3GHGbM2MdHsk\_-Q


一口君最近工作用到CRC校验,顺便整理本篇文章和大家一起研究。


#### 1. 什么是CRC?


CRC(Cyclic Redundancy Checksum)是一种纠错技术,代表循环冗余校验和。


数据通信领域中最常用的一种差错校验码,其信息字段和校验字段长度可以任意指定,但要求通信双方定义的CRC标准一致。主要用来检测或校验数据传输或者保存后可能出现的错误。它的使用方式可以说明如下图所示:


在数据传输过程中,无论传输系统的设计再怎么完美,差错总会存在,这种差错可能会导致在链路上传输的一个或者多个帧被破坏(出现比特差错,0变为1,或者1变为0),从而接受方接收到错误的数据。


为尽量提高接受方收到数据的正确率,在接收方接收数据之前需要对数据进行差错检测,当且仅当检测的结果为正确时接收方才真正收下数据。检测的方式有多种,常见的有**奇偶校验**、**因特网校验**和**循环冗余校验**等。


#### 2. 使用方法概述


**循环冗余校验**是一种用于校验通信链路上数字传输准确性的计算方法(通过某种数学运算来建立数据位和校验位的约定关系的 )。![图片](https://img-blog.csdnimg.cn/img_convert/faf48f24238e871263d8caa684ac9c81.png)


发送方计算机使用某公式计算出被传送数据所含信息的一个值,并将此值 附在被传送数据后,接收方计算机则对同一数据进行 相同的计算,应该得到相同的结果。


如果这两个 CRC结果不一致,则说明发送中出现了差错,接收方计算机可要求发送方计算机重新发送该数据。


#### 3. 应用广泛


在诸多检错手段中,CRC是最著名的一种。CRC的全称是循环冗余校验,其特点是:检错能力强,开销小,易于用编码器及检测电路实现。从其检错能力来看,它所不能发现的错误的几率仅为0.0047%以下。


从性能上和开销上考虑,均远远优于奇偶校验及算术和校验等方式。


因而,在数据存储和数据通讯领域,CRC无处不在:著名的通讯协议X.25的FCS(帧检错序列)采用的是CRC-CCITT,WinRAR、NERO、ARJ、LHA等压缩工具软件采用的是CRC32,磁盘驱动器的读写采用了CRC16,通用的图像存储格式GIF、TIFF等也都用CRC作为检错手段。


这里需要知道几个组成部分或者说计算概念:多项式公式、多项式简记式、数据宽度、初始值、结果异或值、输入值反转、输出值反转、参数模型。


#### 1、多项式公式


对于CRC标准除数,一般使用多项式(或二项式)公式表示,如下图中除数11011(poly值为0x1b)的二项式为G(X)=X4+X3+X+1,X的指数就代表了该bit位上的数据为1,(最低位为0)。


这里特别注意一下位数问题,除数的位数为二项式最高次幂+1(4+1=5),这个很重要。


![图片](https://img-blog.csdnimg.cn/img_convert/de611208defcc5fd7b45fea82655b838.png)


#### 2、多项式简记式


通过对CRC的基本了解我们知道,多项式的首尾必定为1,而这个1的位置在下一步计算一定为0,所以就把前面这个1给省略掉了,出现了一个叫简记式的东西,如上例中除数11011的简记式为1011,很多看过CRC高级语言源码的人会知道,对于CRC\_16标准下G(X)=X16+X15+X2+1(16#18005)的poly值实际上是8005,这里使用的就是简记式。后面会对这个用法做一个说明。


#### 3、数据宽度


数据宽度指的就是CRC校验码的长度(二进制位数),知道了CRC的运算概念和多项式,就可以理解这个概念了,CRC长度始终要比除数位数少1,与简记式长度是一致的。


以上三个数据就是我们经常能够用到的基本数据


#### 4、初始值与结果异或值


在一些标准中,规定了初始值,则数据在进行上述二项式运算之前,需要先将要计算的数据与初始值的最低字节进行异或,然后再与多项式进行计算。


而在结果异或值不为零的情况下,则需要将计算得到的CRC结果值再与结果异或值进行一次异或计算,得到的最终值才是我们需要的CRC校验码。


这里可以看出,初始值与结果值的位数要求与数据宽度一致。


#### 5、输入值反转与输出值反转


输入值反转的意思是在计算之前先将二项式反转,然后再用得到的新值和数据进行计算。如对于G(X)=X16+X15+X2+1(16#18005),其正向值为1 1000 0000 0000 0101,反转值则为1010 0000 0000 0001 1


输出值反转则是将最终得到的CRC结果反转。


通常,输入值反转后的结果值也会是反转的,所以这两个选项一般是同向的,我们只有在在线CRC计算器中会看到自由选择正反转的情况存在。


虽然CRC可以任意定义二项式、数据长度等,但没有一个统一的标准的话,就会让整个计算变得非常的麻烦。但实际上,不同的厂家经常采用不同的标准算法,这里列出了一些国际常用的模型表:


名称多项式表示法应用举例




|  |  |  |  |
| --- | --- | --- | --- |
| CRC-8 | X8+X2+X+1 | 0X107 |  |
| CRC-12 | X12+X11+X3+X2+X+1 | 0X180F | telecom systems |
| CRC-16 | X16+X15+X2+1 | 0X18005 | Bisync, Modbus, USB, ANSI X3.28, SIA DC-07, many others; also known as CRC-16 and CRC-16-ANSI |
| CRC-CCITT | X16+X12+X5+1 | 0X11021 | ISO HDLC, ITU X.25, V.34/V.41/V.42, PPP-FCS |
| CRC-32 | X32+X26+X23+X22+X16+X12+X11+X10+X8+X7+X5+X4+X2+X+1 | 0x104C11DB7 | ZIP, RAR, IEEE 802 LAN/FDDI, IEEE 1394, PPP-FCS |
| CRC-32C | X32+X28+X27+X26+X25+X23+X22+X20+X19+X18+X14+X13+X11+X10+X9+X8+X6+1 | 0x11EDC6F41 | iSCSI, SCTP, G.hn payload, SSE4.2, Btrfs, ext4, Ceph |


在学习CRC校验算法之前,先复习一下CRC会涉及的主要几个主要的算法。


#### 1. 异或


异或,就是不同为1,相同为0,运算符号是^。



0^0 = 0
0^1 = 1
1^1 = 0
1^0 = 1


异或运算存在如下几个规律,需要了解。



0^x = x 即0 异或任何数等于任何数
1^x = ~x 即1异或任何数等于任何数取反
x^x = 0 即任何数与自己异或,结果为0
a ^ b = b ^ a 交换律
a ^ (b ^ c) = (a ^ b) ^c 结合律


#### 2. 模2加法


模2加法相对于普通的算术加法,主要的区别在模2加法,不做进位处理。具体结果如下。0+0 = 0 0+1 = 1 1+1 = 0 1+0 = 1 我们发现模2加法的计算结果,同异或运算结果一模一样。进一步推演,我们会发现,异或运算的5个规律,同样适合于模2加法。这里,就不在一一列举了。


#### 3. 模2减法


模2减法相对于普通的算术减法,主要的区别在模2减法,不做借位处理。具体结果如下。0-0 = 0 0-1 = 1 1-1 = 0 1-0 = 1 我们发现模2减法的计算结果,同模2加法,以及异或的运算结果一模一样。进一步推演,我们会发现,异或运算的5个规律,同样适合于模2减法。这里,就不在一一列举了。


#### 4. 模2除法


模2除法相对于普通的算术除法,主要的区别在模2除法,它既不向上位借位,也不比较除数和被除数的相同位数值的大小,只要以相同位数进行相除即可。


CRC原理:在K位信息码(目标发送数据)后再拼接R位校验码,使整个编码长度为N位,因此这种编码也叫(N,K)码。


通俗的说,就是在需要发送的信息后面附加一个数(即校验码),生成一个新的发送数据发送给接收端。这个数据要求能够使生成的新数据被一个特定的数整除。这里的整除需要引入模 2除法的概念。


那么,CRC校验的具体做法就是


(1)选定一个标准除数(K位二进制数据串)


(2)在要发送的数据(m位)后面加上K-1位0,然后将这个新数(M+K-1位)以模2除法的方式除以上面这个标准除数,所得到的余数也就是该数据的CRC校验码(注:余数必须比除数少且只少一位,不够就补0)


(3)将这个校验码附在原m位数据后面,构成新的M+K-1位数据,发送给接收端。


(4)接收端将接收到的数据除以标准除数,如果余数为0则认为数据正确。


注意:CRC校验中有两个关键点:


一是要预先确定一个发送端和接收端都用来作为除数的二进制比特串(或多项式);


二是把原始帧与上面选定的除进行二进制除法运算,计算出FCS。


前者可以随机选择,也可按国际上通行的标准选择,但最高位和最低位必须均为“1”


#### 实例:


由于CRC-32、CRC-16、CCITT和CRC-4的编码过程基本一致,只有位数和生成多项式不一样,下面就举例,来说明CRC校验码生成过程。


对于数据1110 0101(16#E5),以指定除数11011求它的CRC校验码,其过程如下:![图片](https://img-blog.csdnimg.cn/img_convert/fda8649e2f1db5e7c914614b7214b67c.png)


使用上面计算的校验和和消息数据,可以创建要传输的码字。


![图片](https://img-blog.csdnimg.cn/img_convert/44281eee422361de12ad1b587d8c37f1.png)


有时候,我们需要填充checksum到制定的位置,这就涉及到字节序问题,建议用memcpy()进行拷贝。


实现算法参考网络相关代码,进行整理并验证,可直接使用。crc.c



/*
*一口Linux
*2021.6.21
*version: 1.0.0
*/
#include “crc.h”
#include <stdio.h>

typedef enum {
REF_4BIT = 4,
REF_5BIT = 5,
REF_6BIT = 6,
REF_7BIT = 7,
REF_8BIT = 8,
REF_16BIT = 16,
REF_32BIT = 32
}REFLECTED_MODE;

uint32_t ReflectedData(uint32_t data, REFLECTED_MODE mode)
{
data = ((data & 0xffff0000) >> 16) | ((data & 0x0000ffff) << 16);
data = ((data & 0xff00ff00) >> 8) | ((data & 0x00ff00ff) << 8);
data = ((data & 0xf0f0f0f0) >> 4) | ((data & 0x0f0f0f0f) << 4);
data = ((data & 0xcccccccc) >> 2) | ((data & 0x33333333) << 2);
data = ((data & 0xaaaaaaaa) >> 1) | ((data & 0x55555555) << 1);

switch (mode)
{
case REF_32BIT:
return data;
case REF_16BIT:
return (data >> 16) & 0xffff;
case REF_8BIT:
return (data >> 24) & 0xff;
case REF_7BIT:
return (data >> 25) & 0x7f;
case REF_6BIT:
return (data >> 26) & 0x7f;
case REF_5BIT:
return (data >> 27) & 0x1f;
case REF_4BIT:
return (data >> 28) & 0x0f;
}
return 0;
}

uint8_t CheckCrc4(uint8_t poly, uint8_t init, bool refIn, bool refOut, uint8_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint8_t i;
uint8_t crc;

if (refIn == true)
{
crc = init;
poly = ReflectedData(poly, REF_4BIT);

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x01)
{
crc >>= 1;
crc ^= poly;
}
else
{
crc >>= 1;
}
}
}

return crc ^ xorOut;
}
else
{
crc = init << 4;
poly <<= 4;

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x80)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

return (crc >> 4) ^ xorOut;
}
}

uint8_t CheckCrc5(uint8_t poly, uint8_t init, bool refIn, bool refOut, uint8_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint8_t i;
uint8_t crc;

if (refIn == true)
{
crc = init;
poly = ReflectedData(poly, REF_5BIT);

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x01)
{
crc >>= 1;
crc ^= poly;
}
else
{
crc >>= 1;
}
}
}

return crc ^ xorOut;
}
else
{
crc = init << 3;
poly <<= 3;

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x80)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

return (crc >> 3) ^ xorOut;
}
}

uint8_t CheckCrc6(uint8_t poly, uint8_t init, bool refIn, bool refOut, uint8_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint8_t i;
uint8_t crc;

if (refIn == true)
{
crc = init;
poly = ReflectedData(poly, REF_6BIT);

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x01)
{
crc >>= 1;
crc ^= poly;
}
else
{
crc >>= 1;
}
}
}

return crc ^ xorOut;
}
else
{
crc = init << 2;
poly <<= 2;

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x80)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

return (crc >> 2) ^ xorOut;
}
}

uint8_t CheckCrc7(uint8_t poly, uint8_t init, bool refIn, bool refOut, uint8_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint8_t i;
uint8_t crc;

if (refIn == true)
{
crc = init;
poly = ReflectedData(poly, REF_7BIT);

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x01)
{
crc >>= 1;
crc ^= poly;
}
else
{
crc >>= 1;
}
}
}

return crc ^ xorOut;
}
else
{
crc = init << 1;
poly <<= 1;

while (length–)
{
crc ^= *buffer++;
for (i = 0; i < 8; i++)
{
if (crc & 0x80)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

return (crc >> 1) ^ xorOut;
}
}

uint8_t CheckCrc8(uint8_t poly, uint8_t init, bool refIn, bool refOut, uint8_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint32_t i = 0;
uint8_t crc = init;

while (length–)
{
if (refIn == true)
{
crc ^= ReflectedData(*buffer++, REF_8BIT);
}
else
{
crc ^= *buffer++;
}

for (i = 0; i < 8; i++)
{
if (crc & 0x80)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

if (refOut == true)
{
crc = ReflectedData(crc, REF_8BIT);
}

return crc ^ xorOut;
}

uint16_t CheckCrc16(uint16_t poly, uint16_t init, bool refIn, bool refOut, uint16_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint32_t i = 0;
uint16_t crc = init;

while (length–)
{
if (refIn == true)
{
crc ^= ReflectedData(*buffer++, REF_8BIT) << 8;
}
else
{
crc ^= (*buffer++) << 8;
}

for (i = 0; i < 8; i++)
{
if (crc & 0x8000)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

if (refOut == true)
{
crc = ReflectedData(crc, REF_16BIT);
}

return crc ^ xorOut;
}

uint32_t CheckCrc32(uint32_t poly, uint32_t init, bool refIn, bool refOut, uint32_t xorOut,
const uint8_t *buffer, uint32_t length)
{
uint32_t i = 0;
uint32_t crc = init;

while (length–)
{
if (refIn == true)
{
crc ^= ReflectedData(*buffer++, REF_8BIT) << 24;
}
else
{
crc ^= (*buffer++) << 24;
}

for (i = 0; i < 8; i++)
{
if (crc & 0x80000000)
{
crc <<= 1;
crc ^= poly;
}
else
{
crc <<= 1;
}
}
}

if (refOut == true)
{
crc = ReflectedData(crc, REF_32BIT);
}

return crc ^ xorOut;
}

uint32_t CrcCheck(CRC_Type crcType, const uint8_t *buffer, uint32_t length)
{
switch (crcType.width)
{
case 4:
return CheckCrc4(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 5:
return CheckCrc5(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 6:
return CheckCrc6(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 7:
return CheckCrc7(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 8:
return CheckCrc8(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 16:

img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以戳这里获取

length);
case 6:
return CheckCrc6(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 7:
return CheckCrc7(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 8:
return CheckCrc8(crcType.poly, crcType.init, crcType.refIn, crcType.refOut,
crcType.xorOut, buffer, length);
case 16:

[外链图片转存中…(img-cpe8PSM0-1715408651228)]
[外链图片转存中…(img-DIeUdw1N-1715408651229)]
[外链图片转存中…(img-AvmNkgnO-1715408651229)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Go语言开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以戳这里获取

  • 27
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值