彻底搞懂 Unicode、UTF-8 及 Python encode()的机制、应用场景

「已注销」

已于 2023-06-17 20:30:21 修改

阅读量397

点赞数

文章标签： python

于 2022-07-31 15:17:45 首次发布

本文链接：https://blog.csdn.net/LuxuryZed/article/details/126085944

版权

本文科普了Unicode编码方式，重点讲解了UTF-8如何存储Unicode的二进制编码。在Python中，encode()函数将字符串转换为bytes类型，ASCII码表内的字符原样返回，而ASCII码表外的字符则先查找Unicode编码再进行编码。encode()主要用于不同语言间的交流，非ASCII字符编码后呈现16进制形式。

摘要由CSDN通过智能技术生成

2.1.1 编码方式科普

(参考资料 http://www.ruanyifeng.com/blog/2007/10/ascii_unicode_and_utf-8.html)

Unicode 只是一个符号集，它只规定了符号的 二进制代码 ，却没有规定这个二进制代码应该 如何存储

其中有的字符只有 1B ，有的有 4B ，多出来的会有很多 0 ，这不太好，那有什么办法呢？UTF-8 可以很好地解决这个问题，其他方式此处不做讨论

UTF-8 就是在互联网上使用最广的一种 Unicode 实现方式 ，解决了怎么存储 Unicode 中的二进制编码，存储方式如下：

UTF-8 编码
`0xxxxxxx`
`110xxxxx 10xxxxxx`
`1110xxxx 10xxxxxx 10xxxxxx`
`11110xxx 10xxxxxx 10xxxxxx 10xxxxxx`

下面详细讲述 一 转换成 utf-8 ：

拿到 一 的 unicode 编码 '\u4e00' （可以用python报错或baidu）
calc 计算一下

最低0.47元/天解锁文章

「已注销」

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
彻底搞懂 Unicode、UTF-8 及 Python encode()的机制、应用场景

参考资料http//www.ruanyifeng.com/blog/2007/10/ascii_unicode_and_utf-8.html)其中有的字符只有1B，有的有4B，多出来的会有很多0，这不太好，那有什么办法呢？UTF-8可以很好地解决这个问题，其他方式此处不做讨论。后来想清楚了，encode主要用于不同语言之间的交流，而。几乎同全球通用的，没必要利用Unicode再中转一下。Unicode只是一个符号集，它只规定了符号的。查找到Unicode编码，...
复制链接

扫一扫