windows 记事本utf8编码BOM头问题

最新推荐文章于 2023-11-03 16:33:11 发布
最新推荐文章于 2023-11-03 16:33:11 发布
阅读量1.1k 收藏
点赞数 1
原文链接：https://my.oschina.net/u/257448/blog/1550394
版权

windows记事本另存为utf-8编码会在文件开头加上EF BB BF三个字节.即BOM

我在linux下从文本文件读取utf8转为GBK时,发现第一行转换永远错误,从第二行开始则全部成功.

所以希望如果不确定文本文件是否为windows记事本编辑,需要在程序中加上判断文件头三个字节的逻辑,避免bug.

如果需要编辑utf8编码的文件,建议使用其他软件.

转载于:https://my.oschina.net/u/257448/blog/1550394

chjex02262
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
关于utf-8的BOM问题
ChasingdreamLY的博客
07-13 2001
1. 什么是BOM头    在utf-8编码文件中BOM在文件头部，占用三个字节，用来标识该文件属于utf-8编码，现在已经有很多软件识别BOM头，但还是有些不能识别BOM头，比如PHP就不能识别BOM头，这也就是用记事本编辑utf-8编码的PHP文件后，就会报错的原因。 2. 包含BOM头文件的产生    在windows环境下，用记事本打开任何一个文本文件，另存为utf-8格式后，这样文件就自...
Windows中notepad以UTF-8编码保存文件时实际上用的是UTF-8+BOM编码方式
henter的专栏
03-20 1万+
通过实验发现Windows中notepad以UTF-8编码保存文件时实际上用的是UTF-8+BOM编码方式。
Windows记事本UTF-8编码异常
http://lioil.win
08-09 5004
简书： CSDN博客: GitHub博客: http://lioil.win/2016/04/10/Windows-Notepad.html Coding博客: http://c.lioil.win/2016/04/10/Windows-Notepad.html2016/04/10 今天真是气煞我也，这个Windows10的破记事本编辑器浪费我太多时间，亏我还是Win10脑残粉……原本只想快
记事本编辑产生的BOM头
Mamba
03-24 2492
用记事本编辑了一个插件的php文件，结果微信公众平台里面token验证失败一直报错，折腾一晚上，到最后才知道由于用记事本打开编辑，文件袋BOM，导致token验证失败。从此坚决再也不碰记事本！！ Windows下自带的记事本致命缺陷：千万不要使用Windows自带的记事本编辑任何文本文件。原因是Microsoft开发记事本的团队使用了一个非常弱智的行为来保存UTF-8编码的文件，他们自作聪明
前端面试之Bom
mai0824的博客
03-21 457
什么是BOM？ 1.什么是BOM？ BOM是用来判断文本文件是哪一种Unicode编码的标记，其本身是一个Unicode字符（"\uFEFF"），位于文本文件头部。 在不同的Unicode编码中，对应的bom的二进制字节如下： Bytes Encoding FE FF UTF16BE FF FE UTF16LE EF BB BF UTF8 所以我们可以根据文件头部的几个字节和上面的表格对应来判断该文件是哪种编码形式。 2. 如何查看你文件的BOM字符？ BOM头在记事本中是看不到的 以UTF8为例，新建
解决IDEA不支持带BOM的UTF-8编码文件，使支持
05-08
压缩包内包含 ecj-4.6.2.jar 和 Util.class两个文件 使用说明： 1. 如果你的IDEA是2017.2.2版本，那么直接把ecj-4.6.2.jar放到你的IDEA安装目录下lib文件夹中替换原文件即可 2. 如果你是其他版本的IDEA，那么用压缩...
UTF-8文件的Unicode签名BOM(Byte Order Mark)问题
09-22
近日在调测一个UTF8编码的中文Zen Cart网站时遇到一件怪事，网页显示文字正常，用ie的察看源文件（记事本打开）却发现乱码，firefox没有这个问题。
判断文本文件是否为UTF-8编码
06-06
在IT领域，文本文件的编码方式对于正确地读取和处理文本至关重要。UTF-8是一种广泛使用的字符编码标准，能够表示...在实际开发中，我们应该养成良好的编码习惯，尽量使用标准的UTF-8编码，以减少潜在的兼容性问题。
字符编码大全gbk utf8 ucs
04-28
BOM（Byte Order Mark）是UTF编码中的一个特殊字符，它的作用是标识文件或数据流的字节顺序。在UTF-8中，BOM的字节序列为EF BB BF，而在UTF-16中，BOM可能是FF FE（Little-Endian）或FE FF（Big-Endian）。虽然BOM...
PHP 下载文件时如何自动添加bom头及解释BOM头和去掉bom头的方法
12-18
在utf-8编码文件中BOM在文件头部，占用三个字节，用来标示该文件属于utf-8编码，现在已经有很多软件识别bom头，但是还有些不能识别bom头，比如PHP就不能识别bom头，这也是用记事本编辑utf-8编码后执行就会出错的原因...
被微软的UTF-8 BOM编码坑了
不骄不躁，磨砥刻厉
03-28 4156
一、问题描述    今天用git拉去代码时发现有的文件会出现乱码，但同事拉取下来却没有出现问题。二、错误原因分析    在这件事上，我和同事的唯一区别就是所用的操作系统不同，我用的是mac，他用的是window。同一个文件在不同操作系统的表现不同，很有可能是采用了window支持但mac不支持的编码格式。    紧接着，我查看了出问题的文件的编码格式，果不其然，它并不是我们平常使用的UTF-8，而...
windows文本文件 utf-8 无bom格式编码引发的惨案(maven resource 替换失败)...mark
njitluoluo的专栏
12-10 1323
windows文本文件 utf-8 编码格式 分为2种。utf-8 和 utf-8 bom 。 今天java 项目中，maven resource 无论如何 config.properties文件 某个属性值替换不掉。。。 试了N遍 发现 有个curse ，总是 处于第一行的 配置项替换不了。。。 So。。 开始怀疑是 文件编码了，于是，新建了文本文件 (windows自带notepad)，
记事本等微软的文本编辑工具自动加BOM导致HTML异常
u012737225的专栏
05-27 560
直接影响： HTML解析不正确，无法正常解析 解决办法：使用everedit去掉BOM
经验之谈(1)-----【utf-8的bom头】
qq_28374415的博客
03-10 280
问题：cocos creater2.4.3升级2.4.4时遇到，无法将json挂载到属性面板上 原因：后来查到是该json含有bom 解决：找个其他软件转换一下，去掉bom(比如sublime)
Windows 文本格式BOM头问题
最新发布
非余
11-03 200
windows环境下遇见的文本BUG
UTF-8与UTF-8 BOM
LegendaryHsl的博客
12-13 1万+
在我们通常使用的windows系统中，我发现了一个有趣的现象。我新建一个空的文本文档，点击文件-另存为-编码选择UTF-8，然后保存。此时这个文件明明是空的，却占了3字节大小。原因在于：此时保存的编码方式自动会变为UTF-8 BOM 一、一个汉字在不同的编码方式中占多少字节？ 1.在UTF-8中，一个汉字占3个字节（一个字符占一个字节） 2.在ASCII码中，一个汉字占2个字节（一个字符占一
【转】刨根究底字符编码之十六——Windows记事本的诡异怪事：微软为什么跟联通有仇？
sinolover的专栏
11-18 381
1. 当用一个软件(比如Windows记事本或Notepad++)打开一个文本文件时，它要做的第一件事是确定这个文本文件究竟是使用哪种编码方式保存的，以便于该软件对其正确解码，否则将显示为乱码。 一般软件确定文本文件编码方式的方法有如下三种： 检测文件头标识； 提示用户手动选择； 根据一定的规则自行推断。 2. 文件头标识一般指的是字节顺序标记BOM(Byte Order Mark)，位于文件的最开始。当打开一个文本文件时，就BOM而言，有如下几种情形： BOM为：EF BB BF ——表示编
详解windows记事本的4种编码方式
热门推荐
u012138730的专栏
11-15 2万+
在工作中经常用遇到乱码问题，特别是之前用过python做一些解析文本的工作的时候。当时解决问题都是通过上网搜索 错误的提示，只是知道了编码解码方式不统一。这里对编码方式做一个系统的整理，方便以后遇到问题查阅。本文以记事本的编码方式作为切入点，对编码方式类型做介绍。 目录 1. ANSI ASCII码 GBK码 JIS码 2. Unicode，Unicode big e...
怎么改变文件的编码格式
06-09
要更改文件的编码格式，您可以使用文本编辑器来打开文件并将其另存为另一种编码格式。以下是一些常见的文本编辑器和它们的更改编码格式的方法： 1. Windows 记事本（Notepad） a. 打开记事本，并在菜单栏中选择 “文件” -> “打开”。 b. 在文件类型下拉菜单中选择 “所有文件”。 c. 找到您想要更改编码格式的文件并打开它。 d. 在菜单栏中选择 “文件” -> “另存为”。 e. 在 “编码” 下拉菜单中选择您想要使用的编码格式，例如 “UTF-8” 或 “日文编码”。 f. 在 “文件名” 字段中输入一个新的文件名，并单击 “保存” 按钮。 2. Sublime Text a. 打开 Sublime Text，并在菜单栏中选择 “文件” -> “打开文件”。 b. 找到您想要更改编码格式的文件并打开它。 c. 在菜单栏中选择 “文件” -> “另存为”。 d. 在 “编码” 下拉菜单中选择您想要使用的编码格式，例如 “UTF-8” 或 “日文编码”。 e. 在 “文件名” 字段中输入一个新的文件名，并单击 “保存” 按钮。 3. Visual Studio Code a. 打开 Visual Studio Code，并在菜单栏中选择 “文件” -> “打开文件”。 b. 找到您想要更改编码格式的文件并打开它。 c. 在底部状态栏中，单击当前文件编码格式的名称（例如“UTF-8”）。 d. 从下拉菜单中选择您想要使用的编码格式，例如 “UTF-8 with BOM” 或 “Shift_JIS”。 e. 在菜单栏中选择 “文件” -> “另存为”。 f. 在 “文件名” 字段中输入一个新的文件名，并单击 “保存” 按钮。 请注意，更改编码格式可能会导致文件出现乱码。因此，在更改编码格式之前，请确保您的文件的实际编码格式。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值