主要针对:
https://mp.weixin.qq.com/s/Pff9yYGch-noVq_cUcY5CA
当前由于用户输入随意及手写输入法易出错等原因,错误串在输入文本中占比高达10%-15%,这也使得中文文本纠错模块必要性凸显。而在垂直领域中,比如平安的寿险领域,同样会因为用户输入随意、不清楚产品名称等原因,导致用户提问与回答存在大量的手写及同音错误。
自然语言处理常见的任务包括词法分析、句法分析、用户意图识别等,而要取得理想的结果,输入数据的准确性是基本前提。一旦语言使用者对语言掌握不够或粗心大意,从而造成用词不当、张冠李戴等错误时,很容易引起“差之毫厘,谬以千里”的“蝴蝶效应”。因此,文本纠错对NLP技术整体的性能保证起着至关重要的作用。
试着跑实验:
https://github.com/beyondacm/Autochecker4Chinese
https://cloud.tencent.com/developer/article/1435917,DCQC没有代码
文本纠错学习
最新推荐文章于 2024-04-02 09:30:15 发布