问题:
ERROR: text file 'data/train/text' contains disallowed UTF-8 whitespace character(s)
出现原因:
^M 是 WINDOWS 的产物,ctrl+M ,生成一个 ^M ,说明文件是在WINDOWS的编辑器里编辑并保存过的。
解决方法:
cat data/train/text |tr -d '/r'
问题:
ERROR: text file 'data/train/text' contains disallowed UTF-8 whitespace character(s)
出现原因:
^M 是 WINDOWS 的产物,ctrl+M ,生成一个 ^M ,说明文件是在WINDOWS的编辑器里编辑并保存过的。
解决方法:
cat data/train/text |tr -d '/r'