UTF-8 全称是:Universal Character Set Transformation Format--8-bit。UTF-8是表示Unicode字符集中的每个字符的一种编码方式,采用变长编码,1-4字节。和UFF-16以及UTF-32相比,没有endianness和字节顺序掩码引发的复杂性。
UFT-8广泛用于web,email,现在越来越多的操作系统支持它。Linux默认就是UFT-8编码。
UFT-8广泛用于web,email,现在越来越多的操作系统支持它。Linux默认就是UFT-8编码。
。2003年11月RFC 3629文档将UTF-8限制在[0, U+10FFFF]范围内,因此最多只能有4个字节。
下面的图来自wiki:
关于编码方法,首先要了解几个概念:
1. UTF-8的前128个字符都是用单字节表示,完全和ASCII码一样. 这就是上表的第一行
2. 2-4字节的情况下,第一个字节称为leading byte, 后面的字节叫做continuation bytes.
3. leading bytes的高位总是若干个1加上一个0组成,1的个数就是整个字节的个数,比如表格第二行就是110,第三行就是1110, 第四行就是11110.
4. continuation bytes的高位总是10
5.其余的bit用于编码,如果有用不到的bit,都设置为0
上表第一行用单字节表示128个字符,表示全部的ASCII码。
上表第二行用两字节表示1920个字符,包含了绝大多数拉丁字母。
上表第三行用三字节表示Unicode BMP中的余下字符。