计算机编码知识整理

编码概念

计算机编码指电脑内部代表字母或数字的方式.

常见的编码方式有:ASCII编码,GB2312编码(简体中文),GBK,BIG5编码(繁体中文),ANSI编码,unicode,utf-8编码等

单位

最小的单元是位(bit)，接着是字节(Byte)，一个字节=8位，英语表示是1 Byte=8 bits 。

机器语言的单位Byte。1 KB=1024 Byte; 1 MB=1024 KB; 1 GB=1024 MB ; 1TB=1024 GB。

编码分类

ASCII

• （American Standard Code for Information Interchange，美国信息交换标准代码）长度为1字节；第一位为校验位，后七位表示 英文字母及符号

GB2312

• 长度为2字节；共 7445 个图形字符。其中包括6763个汉字，其中一级汉字3755个，二级汉字3008个;包括拉丁字母、希腊字母、日文平假名及片假名字母、俄语西里尔字母在内的682个全角字符

GBK

• GBK编码，是在GB2312-80标准基础上的内码扩展规范，使用了双字节编码方案，其编码范围从8140至FEFE（剔除xx7F），共23940个码位，共收录了21003个汉字，完全兼容GB2312-80标准

GB18030

• 采用变长多字节编码，每个字可以由1个、2个或4个字节组成，收录汉字70,244个；兼容GB2312、基本兼容GBK支持Unicode所有码位，2023年8月1日实施强制标准；

UNICODE

• 统一码（Unicode），也叫万国码、单一码，是计算机科学领域里的一项业界标准，包括字符集、编码方案等
• UTF-8编码格式
  字节 格式 实际编码位 码点范围
  1字节 0xxxxxxx 7 0 ~ 127
  2字节 110xxxxx 10xxxxxx 11 128 ~ 2047
  3字节 1110xxxx 10xxxxxx 10xxxxxx 16 2048 ~ 65535
  4字节 11110xxx 10xxxxxx 10xxxxxx 10xxxxxx 21 65536 ~ 2097151
  UTF-8的特点是对不同范围的字符使用不同长度的编码。对于0x00-0x7F之间的字符，UTF-8编码与ASCII编码完全相同。UTF-8编码的最大长度是4个字节。从上表可以看出，4字节模板有21个x，即可以容纳21位二进制数字 #F44336。Unicode的最大码位0x10FFFF也只有21位。
  例1：“汉”字的Unicode编码是0x6C49。0x6C49在0x0800-0xFFFF之间，使用用3字节模板了：1110xxxx 10xxxxxx 10xxxxxx。将0x6C49写成二进制是：0110 1100 0100 1001，用这个比特流依次代替模板中的x，得到：1110 0110 1011 0001 1000 1001，即E6 B1 89。