## 问题出现背景
在讲jieba方法替换为cutword之后发生该问题,但后文输出依旧正常。
## 原因
cutword不支持繁体分词,cutword使用opencc包将繁体词转化为简体。数据集中有繁体词的情况下,按照要求按照openncc即可。无繁体词处理需求,可忽略该警告。
## 问题出现背景
在讲jieba方法替换为cutword之后发生该问题,但后文输出依旧正常。
## 原因
cutword不支持繁体分词,cutword使用opencc包将繁体词转化为简体。数据集中有繁体词的情况下,按照要求按照openncc即可。无繁体词处理需求,可忽略该警告。