最近遇到一个问题,需要判断一个字符串中是否包含汉字、拼音、普通字符,于是就简单记录下来。
首先,如何判断这些,绕不开操作系统中的编码,常见的有三种:ASCII、Unicode、UTF-8
ASCII
这是最早的一种编码方式,因此只将英文字符编码进去了,也就是一些大小写字母和一些符号。但是,由于后续计算机扩展到各个国家,各国的语音也需要编码,因此ASCII编码(00000000 - 01111111)127位就不够用了,于是就制定了其他编码方式。
各国都有各自的一套编码方式,比如中国制定了GB2312编码,日本把日文编入了Shift_JIS里等等,这样造成的结果就是会发生冲突,因此,Unicode应运而生。
Unicode
Unicode把所有符号都统一到一套编码里,这样就不会再有乱码问题了(Unicode 兼容了ASCII码)。 Unicode标准也在不断发展,但最常用的是用两个字节表示一个字符(如果要用到非常偏僻的字符,就需要4个字节)。现代操作系统和大多数编程语言都直接支持Unicode。
ASCII和Unicode的区别
ASCII编码是1个字节,而Unicode编码通常是2个字节,举例如下。
-
字母 A 用ASCII编码是十进制的65,二进制的01000001;
-
字符 0 用ASCII编码是十进制的48,二进制的00110000,注意字符 ‘0’ 和整数 0 是不同的