Unicode中UTF-8与UTF-16编码详解

最新推荐文章于 2024-02-19 14:14:40 发布
最新推荐文章于 2024-02-19 14:14:40 发布
阅读量1.8k 收藏
点赞数 1
分类专栏： 黄Java的地盘 文章标签： javascript unicode utf
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42899690/article/details/120562524
版权

概述

本文通过介绍Unicode编码以及对应的两种编码方式UTF-8和UTF-16，让读者能够了解关于字符串编码的相关知识，同时能够弄清楚Unicode和UTF-8和UTF-16之间的关系。

本文的主要内容为：

  • Unicode编码，包含Unicode编码基础知识以及与UTF-8和UTF-16这两种编码方式的关系

  • UTF-8编码，包含基础概念和Unicode编码转换到UTF-8编码方式

  • UTF-16编码，包含基础概念和Unicode编码转换到UTF-16编码方式

  • JavaScript中string与DOMString

本文作为utfx.js源码解析的基础知识储备文章，通过了解UTF-8和UTF-16这两种编码方式，读者能够理解使用JavaScript进行编码转换的原理。

如果想了解编码转换的使用场景，可以阅读我之前的博客WebSocket系列之JavaScript字符串如何与二进制数据间进行互相转换。

如果想了解utfx.js相关的源码内容，可以关注我的后续文章。

Unicode编码

概念

Unicode（

最低0.47元/天 解锁文章
黄Java
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
彻底搞懂编码ASCII、Unicode、GBK 和 UTF8 、UTF-16、UTF-32编码方式（非常经典）
BRAVE MAN的博客
08-22 2万+
GBK,ISO-8859-1,GB2312的本质区别 编码有几种 ，计算机最初是在美国等国家发明的 所以表示字符只有简单的几个字母只要对字母进行编码就好 我们标准码 iso-8859-1 这就是一个标准 但是后来计算机普及了 于是就中国要使用计算机了 但是机器不认得中文，于是就有了国际码。 gbk gb2312都是这类。两个其实一个，一个是标准（发布的代号），一个是简称。后来多了个阿拉伯语、日语...
Unicode、UTF-8、UTF-16、UTF-32
yeruikang的博客
12-21 514
Unicode是一个包含大多数国家文字的字符标准，给每一个字符编号，形成一个庞大的字符集。a.将Unicode编码减去0x10000，得到的编码区间是0x00000-0xFFFFF（20位二进制数）。UTF-8编码的每个字节要用字节开头的几位（bit）告诉计算机一些信息。UTF-32每个字符会读取4个字节，然后按标准转为字符。b.将得到的编码分为两部分，每一部分为10位二进制数。c.在高位的10bit前补上6位的标识110110。d.在低位的10bit前补上6位的标识110111。使用两个字节直接表示。
UTF-8 与 UTF-16编码详解
热门推荐
小鲁蛋的博客
08-19 2万+
UTF-16是Unicode字符编码五层次模型的第三层：字符编码表（Character Encoding Form，也称为 "storage format"）的一种实现方式。即把Unicode字符集的抽象码位映射为16位长的整数（即码元， 长度为2 Byte）的序列，用于数据存储或传递。Unicode字符的码位，需要1个或者2个16位长的码元来表示，因此这是一个变长表示。引用维基百科中对于UTF-16编码的解释我们可以知道，UTF-16最少也会用2 Byte来表示一个字符，因此没有办法兼容ASCII编码。
UTF-8 与 UTF-16区别详解
最新发布
草莓不爱吃白菜的博客
02-19 1170
计算机将数据（包括文本字符）存储为二进制（1 和 0）。 ASCII 是一种早期的编码方式，或将字符映射到二进制代码以便计算机可以存储它们。但是，ASCII 没有为非拉丁字符和数字以二进制表示提供足够的空间。 Unicode 是解决这个问题的方法。Unicode 为每种人类语言中的每个字符分配一个唯一的“代码点”。 UTF-8 是一种 Unicode 字符编码方法。这意味着 UTF-8 获取给定 Unicode 字符的代码点并将其转换为二进制字符串。它也做相反的事情，读取二进制数字并将它们转换回字符。 U
ASCII字符集、Unicode字符集下UTF-8 和UTF-16编码、GBK(GB2312)字符集
baidu_16370559的博客
06-18 3648
https://www.cnblogs.com/Braveliu/p/9460812.html
关于在C程序中处理UTF-8文本的方法详解
08-28
"C程序中处理UTF-8文本的方法详解" 在C程序中处理UTF-8文本是一件复杂的事情，但却是非常必要的，因为UTF-8是互联网上使用最广的一种unicode实现方式。为了处理UTF-8文本，需要了解UTF-8的编码规则，包括单字节符号...
字符编码详解及由来(UNICODE,UTF-8,GBK) 比较详细
10-28
UTF-8编码是变长编码，根据字符的复杂程度使用1至4个字节表示，这使得它既能够高效存储常见的ASCII字符，又能表示Unicode中的所有字符，包括汉字。 总结来说，字符编码的发展历程反映了计算机技术从单一语言环境...
Android UTF-8转码实例详解
08-30
这篇“Android UTF-8转码实例详解”将深入探讨如何在Android环境中进行UTF-8编码和解码。 首先，了解UTF-8编码的基本原理。UTF-8是一种变长编码，它根据字符的Unicode码点长度使用1到4个字节。ASCII字符（如英文...
各种编码UNICODE、UTF-8、ANSI、ASCII、GB2312、GBK详解
06-11
各种编码UNICODE、UTF-8、ANSI、ASCII、GB2312、GBK详解
UTF-8.rar_Free!_UTF-8简体中文免费版_cmsware2.8.5pro
09-20
【UTF-8编码详解】 UTF-8是一种广泛使用的Unicode字符编码方案，它的全称为"8位统一转型格式"。在互联网上，UTF-8是最常见的字符编码格式，它能够表示Unicode标准中的所有字符，包括汉字和其他多种语言的文字。UTF-...
Unicode及其编码方式 UTF-8、UTF-16、UTF-32
虎鲸虎鲸
09-19 1061
Unicode （中文：万国码、国际码、统一码、单一码）计算机科学领域里的一项业界标准。它对世界上大部分的文字系统进行了整理、编码，使得计算机可以用更为简单的方式来呈现和处理文字。 Unicode 至今仍在不断增修，每个新版本都加入更多新的字符。Unicode涵盖的数据除了视觉上的字形、编码方法、标准的字符编码外，还包含了字符特性，如大小写字母。 来源：维基百科 Unicode 是为了解决传...
C++实现unicode码转换成UTF-16的加码和解码函数
因热爱而执着，因执着而成功。
12-29 1117
Unicode的实现方式不同于编码方式。一个字符的Unicode编码是确定的，但是在实际存储和传输过程中，由于不同系统平台的设计不一定一致，以及出于节省空间的目的，对Unicode编码的实现方式有所不同。Unicode的实现方式称为Unicode转换格式（UnicodeTransformation Format，简称为UTF）。 对Unicode编码的主要有UTF-16BE、UTF-16LE、UTF-8、UTF-7以及UTF-32等实现方式，目前常用的实现方式是UTF-16LE、UTF-...
ascii码，unicode编码，utf-8编码
weixin_41228949的博客
12-28 1793
我理解的ascii码，unicode编码，utf-8编码； 1、ascii编码： 美国于上个世纪60年代制定了一套字符编码，英语字符与二进制位之间对应关系，做了统一规定。故此诞生了一直沿用至今的ASCII码。 2、unicode编码 英语用128个符号编码就足够了，但是用来表示其他语言，128个符号是不够的。 此时，unicode编码出现了。 unicode是这样一种编码，将世界上所有的符号都纳入其中。每一个符号都给予一个独一无二的编码（在0-127位，unicode与ascii表...
Unicode的UTF-8 UTF-16
龙
07-15 554
unicode utf-8 utf-16
Unicode，UTF-8,UTF-16,UTF-32
mylinx的专栏
10-14 9130
这是转载自网络上的博文，UTF-8,UTF-16,UTF-32编码方式都是UNICODE，但只是他们的保存方式不同。 Unicode（统一码、万国码、单一码）是一种在计算机上使用的字符编码。它为每种语言中的每个字符设定了统一并且唯一的二进制编码，以满足跨语言、跨 平
简单几句话总结Unicode，UTF-8和UTF-16
weixin_33800593的博客
08-12 282
概念 先说一说基本的概念，这包括什么是Unicode，什么是UTF-8，什么是UTF-16。 Unicode，UTF-8，UTF-16完整的说明请参考Wiki（Unicode，UTF-8，UTF-16）。用比较简单的话来说就是，Unicode定义了所有可以用来表示字符的数值集合（称之为Code Point）。UTF-8和UTF-16等UTF标准定义了这些数值和字符的映射关系。 UTF-8 ...
UTF-8和UTF-16使用对比
郭胜龙的技术博客
12-23 3754
UTF-16  说到 UTF 必须要提到 Unicode（Universal Code 统一码），ISO 试图想创建一个全新的超语言字典，世界上所有的语言都可以通过这本字典来相互翻译。可想而知这个字典是多么的复杂，关于 Unicode 的详细规范可以参考相应文档。Unicode 是 Java 和 XML 的基础，下面详细介绍 Unicode 在计算机中的存储形式。  UTF-16 具体
ASCII,UTF-16,UTF-8编码的区别
iMEANT的博客
07-08 5518
在计算机中，所有的数据在存储和运算时，都要使用二进制数表示（因为计算机用高电平和低电平分别表示1和0) ASCII码 ASCII 码使用指定的7 位或8 位二进制数组合来表示128 或256 种可能的字符。标准ASCII 码也叫基础ASCII码，使用7 位二进制数（剩下的1位二进制为0）来表示所有的大写和小写字母，数字0 到9、标点符号， 以及在美式英语中使用的特殊控制字符。 0～31及...
Oracle字符集研究1.ppt
11-13
Oracle字符集研究1.ppt

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值