批量去除utf8文件的bom头

批量去除文件夹中utf8文件中的bom头
我们可以使用grep来查看哪些文件存在bom头,然后对这些文件执行替换。

grep -r -i -l $’^\xEF\xBB\xBF’ . | xargs sed -i ‘s/^\xEF\xBB\xBF//g’
1
-r 在当前目录及其子目录下搜索
-i 忽略大小写的不同,所以大小写视为相同
-l 查询多文件时只输出包含匹配字符的文件名

如果不需要递归多层目录,只处理当前目录

grep -i -l $’^\xEF\xBB\xBF’ * | xargs sed -i ‘s/^\xEF\xBB\xBF//g’

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在 Java 中,我们可以使用 `java.nio.charset.CharsetDecoder` 类来处理 UTF-16 编码的 BOM 。 下面是一个例子: ```java import java.io.*; import java.nio.charset.Charset; import java.nio.charset.CharsetDecoder; import java.nio.charset.CodingErrorAction; public class RemoveBOM { public static void main(String[] args) throws IOException { // 打开 UTF-16 编码的文件 FileInputStream fis = new FileInputStream("file.txt"); InputStreamReader isr = new InputStreamReader(fis, Charset.forName("UTF-16")); // 创建 CharsetDecoder 对象 CharsetDecoder decoder = Charset.forName("UTF-16").newDecoder(); decoder.onMalformedInput(CodingErrorAction.IGNORE); decoder.onUnmappableCharacter(CodingErrorAction.IGNORE); // 读取文件内容 CharBuffer cb = CharBuffer.allocate(fis.available()); isr.read(cb); cb.flip(); // 去除 BOM if (cb.length() > 0 && cb.charAt(0) == '\ufeff') { cb.deleteCharAt(0); } // 处理文件内容 // ... // 保存文件内容 FileOutputStream fos = new FileOutputStream("file.txt"); OutputStreamWriter osw = new OutputStreamWriter(fos, Charset.forName("UTF-16")); osw.write(cb.toString()); osw.close(); } } ``` 在这个例子中,我们首先使用 `java.io.FileInputStream` 和 `java.io.InputStreamReader` 打开了一个 UTF-16 编码的文件,并通过 `java.nio.charset.Charset.forName` 方法创建了一个 `java.nio.charset.CharsetDecoder` 对象。 然后,我们使用 `java.nio.charset.CharsetDecoder` 对象读取了文件内容,并检查了它是否以 BOM 。如果是,我们使用 `java.lang.CharSequence.deleteCharAt` 方法从内容中去除BOM 。 在处理完文件内容后,我们再次使用 `java.io.FileOutputStream` 和 `java.io.OutputStreamWriter` 将内容写入文件中。这次,由于我们已经去除BOM ,所以写入的文件是没有 BOM 的。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值