Go语言中GBK字节数计算

最新推荐文章于 2024-02-24 19:16:17 发布
最新推荐文章于 2024-02-24 19:16:17 发布
阅读量425 收藏 1
点赞数
分类专栏： CGO开发 文章标签： golang 开发语言 后端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/testapl/article/details/128868245
版权

前言

Go语言中统一使用UTF-8编码格式，但是在操作设备的时候，设备侧的编码格式为GBK，那么如何转换及计算字节数呢？

一、GBK编码

GBK编码占1个或者2个字节，不能简单的通过字符格式计算字节数。
UTF8占1~4个字节不等，如果不直接把UTF8格式的字符串转换成GBK编码，则计算就会出错。

二、解决的办法

先进行字符编码格式转换，在通过len函数计算字节数，示例代码如下：

import (
	"bytes"
	"io/ioutil"
	"testing"
	"unicode/utf8"

	"golang.org/x/text/encoding/simplifiedchinese"
	"golang.org/x/text/transform"
)

func TestGBKLength(t *testing.T) {
	str := "兔年大吉2022-02-03AbcD您好"
	t.Logf("UTF8字符数:%d", utf8.RuneCountInString(str))
	t.Logf("UTF8字节数:%d", len(str))
	reader := transform.NewReader(bytes.NewReader([]byte(str)), simplifiedchinese.GBK.NewEncoder())
	d, e := ioutil.ReadAll(reader)
	if e != nil {
		t.Fatal(e)
	}
	t.Logf("GBK字节数:%d", len(d))
}

运行结果：

UTF8字符数:20
UTF8字节数:32
GBK字节数:26

总结

在实际开发中要分清楚字符数和字节数，有的产品说明不严谨，说的是32个字符其实是32个字节，GBK编码格式下输入16个汉字就提示超过32个字符了。

空间法则
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
UTF-8和GBK编码下JS计算实际字符串长度
焱少的博客
10-11 883
开发过程需要校验前台输入的字符串长度，以保证传到后台的字符串长度不超过数据库字段的限制，当中英文字符混合在一起的时候，采用此种方法可以直接计算字符串实际长度，便于校验过滤！ // UTF8字符集实际长度计算 function getStrLeng(str){ var realLength = 0; var len = str.length; var charCode = -...
C#计算输入汉字GBK编码后十六进制数输出的方法
09-03
主要介绍了C#计算输入汉字GBK编码后十六进制数输出的方法,涉及C#编码操作相关技巧,需要的朋友可以参考下
【Go语言实战】字符编码GBK、UTF8转换
晴空的博客
05-20 4562
近期计划开发一个小说阅读APP，本意是学习golang开发，以及爬虫设计。 一般规范些的站点，会采用utf-8编码开发运行在浏览器上。然而，在我抓取的某些网站，却是采用的GBK编码，因此，在解析dom后，获取中文内容的时候，总是会出现一些编码问题，导致我并不能确认，解析到的内容，是不是就是我想要的，我期望的。 为了解决这个问题，我面向百度，面向goole编程，最终找到了一个可靠的解决办法，即goo...
Java中文字符所占的字节数
12-22
Java语言中，中文字符所占的字节数取决于字符的编码方式，一般情况下，采用ISO8859-1编码方式时，一个中文字符与一个英文字符一样只占1个字节；采用GB2312或GBK编码方式时，一个中文字符占2个字节；而采用UTF-8编码方式时，一个中文字符会占3个字节。我们可以通过String类的getBytes(String charsetName)方法来获取到字符串以指定编码方式编码后所得到的字节数组，然后字节数组的长度是该字符串在指定编码方式下所占的字节数。下面为一个测试示例：   public static void main(String []args) throws
go gbk和utf8g互转（mahonia）和判断对应编码方法
最新发布
闲人一小枚
02-24 469
2、判断是不是Utf8 (没使用go自带的utf8判断，测试有些字符串判断有问题，如“系统”，“时装”，可能只是本人有问题)一、导入库 github.com/axgle/mahonia。1、判断是不是gbk。
golang 字符串编码格式 GBK/UTF-8的判断
tianshi418的专栏
03-30 6780
//GBK编码格式判断 func isGBK(data []byte) bool { length := len(data) var i int = 0 for i < length { if data[i] <= 0x7f { //编码0~127,只有一个字节的编码，兼容ASCI...
关于GBK中的英文字符占用一个字节还是两个字节的问题
热门推荐
MyDriverC
01-15 2万+
网上大部分的说法是：GB2312能完美的支持简体中文和英文，一个中文文字占用2个字节，一个英文字母同样占用2个字节。 可是我在windows下或linux下（确认是gbk编码）测试中发现英文字母占用一个字节，这是怎么回事？ 例：a你b好，编码是：61 C4 E3 62 BA C3 英文字母是1byte. lz 如果想感受2byte的字符,可以用全角试一下
gbk,utf-8占用字节数
u011250186的博客
04-28 4022
GBK： 　　中文、英文、数字均使用双字节来表示 UTF-8： 　　汉字占3个字节、数字占1个字节、英文字母占1个字节 例： <?php //测试时文件的编码方式要是UTF8 $str='中文a字1符'; echo strlen($str).'<br>';//14 echo mb_strlen($str...
最简单的计算GBK偏移量 java版 取模时用到
chenhao0568的专栏
06-24 1178
GBK码位分配及顺序 GBK 亦采用双字节表示，总体编码范围为 8140-FEFE，首字节在 81-FE 之间，尾字节在 40-FE 之间，剔除 xx7F 一条线。总计 23940 个码位，共收入 21886 个汉字和图形符号，其中汉字（包括部首和构件）21003 个，图形符号 883 个。 1.直接计算 java版 import java.io.Unsupporte
Go 学习笔记（31）— 字符串 string、字符 rune、字节 byte、UTF-8 和 Unicode 区别以及获取字符串长度
wohu1104的专栏
05-18 7185
1. 字符串 string 类型 Go 语言中字符串的内部实现使用 UTF-8 编码，通过 rune 类型，可以方便地对每个 UTF-8 字符进行访问。当然， Go 语言也支持按照传统的 ASCII 码方式逐字符进行访问。 字符串是常量，可以通过类似数组索引访问其字节单元，但是不能修改某个字节的值； var a string = "hello,world" b := a[0] a[1] = "a" // error 内置的 len 函数可以返回一个字符串中的字节数目（不是 rune 字符数目）
JavaScript实现的GBK、UTF8字符串实际长度计算函数
10-25
主要介绍了JavaScript实现的GBK、UTF8字符串实际长度计算函数,需要的朋友可以参考下
PHP解决URL中文GBK乱码问题的两种方法
01-20
您可能感兴趣的文章:PHP fopen 读取带中文URL地址的一点见解PHP中文URL编解码(urlencode()rawurlencode()php中解析带中文字符的url函数分享php中url传递中文字符,特殊危险字符的解决方法php下目前为目最全的CURL...
Discuz! X3.4 正式版 简体中文 GBK 20170802
11-29
Discuz! X3.3 在继承和完善 Discuz! X3.2 的基础上，针对 PHP7 进行了优化。对于 X3.2 用户来说，X3.3 已继承了 X3.2 的补丁修复工作。安全稳定的程序为提供更加可靠的保障。
分割GBK中文遭遇乱码的解决方法
10-27
以下是对分割GBK中文遭遇乱码的解决方法进行了详细的分析介绍，需要的朋友可以过来参考下
Discuz! X3.2 正式版 简体中文 GBK 20160601
12-10
Discuz! X3.2 在继承和完善 Discuz! X3.1 的基础上，针对社区移动端进行了新的尝试。推出微信登录、微社区等功能。安全稳定的程序为提供更加可靠的保障。
Discuz! X3.3 正式版 简体中文 GBK 20170301
12-02
Discuz! X3.3 在继承和完善 Discuz! X3.2 的基础上，针对 PHP7 进行了优化。对于 X3.2 用户来说，X3.3 已继承了 X3.2 的补丁修复工作。安全稳定的程序为提供更加可靠的保障。
Go实现GBK和UTF-8编码相互转换
小龙在线
06-25 1135
mahonia实现GBK和UTF-8编码相互转换。
golang的GBK转码和复原
qq_42860875的博客
01-15 584
对消息内容做一次16进制的解码，还原为gkb的byte形式，再调用simplifiedchinese库解码还原文字信息。使用库"golang.org/x/text/encoding/simplifiedchinese"JT808设备文字信息下发与接收编码记录。编码之后再编码为16进制字符串表示。文字信息的传递需要使用GBK编码。如此符合了报文的需求。
GBK编码 如何将字符装换为字节数组 c#语言
05-04
要要将要将一个要将一个字符要将一个字符转要将一个字符转换要将一个字符转换为要将一个字符转换为GBK要将一个字符转换为GBK编要将一个字符转换为GBK编码要将一个字符转换为GBK编码的要将一个字符转换为GBK编码的字要将一个字符转换为GBK编码的字节数要将一个字符转换为GBK编码的字节数组要将一个字符转换为GBK编码的字节数组，要将一个字符转换为GBK编码的字节数组，可以要将一个字符转换为GBK编码的字节数组，可以使用要将一个字符转换为GBK编码的字节数组，可以使用Java要将一个字符转换为GBK编码的字节数组，可以使用Java中要将一个字符转换为GBK编码的字节数组，可以使用Java中的要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： 要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java 要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str =要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; 要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[]要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes =要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); 要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，这要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，这里要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，这里是要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，这里是GBK要将一个字符转换为GBK编码的字节数组，可以使用Java中的getBytes()方法。 示例代码如下： ```java String str = "中"; byte[] bytes = str.getBytes("GBK"); ``` 上述代码中，字符串"中"被转换为GBK编码的字节数组。getBytes()方法的参数指定了要使用的编码，这里是GBK。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

空间法则

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值