问题如题,今天处理以文本文件时想删除以“T\t”开头的行,于是使用如下命令:
$sed '/^T\t/d' file > file.output
结果如下:
发现第一行虽以T\t开头,却没有被删掉,自己估计是第一行存在隐藏字符,遂用vi打开该原数据文件,使用set list查看隐藏字符,结果如下:
未发现特殊情况,在网上搜索解决方案未果,请教师兄,得解答:
$less file
发现第一行开头有<U+FEFF>
在网上搜索解释如下:
资源文件生成器 (Resgen.exe) 在默认情况下使用 UTF-8 编码来处理文件。若要让 Resgen.exe 识别使用 UTF-16 编码的文件,必须在该文件的开头包含 Unicode 字节顺序标记 (U+FEFF)。
此标记应为某程序添加的文件编码标记。
耗时半日解决此问题,留此记录,以防忘记。