中文文本纠错模型bert4keras

最新推荐文章于 2024-03-21 09:33:20 发布
最新推荐文章于 2024-03-21 09:33:20 发布
阅读量1.6k 收藏 6
点赞数 1
分类专栏： Python
原文链接：https://github.com/fushengwuyu/chinese_spelling_correction
版权

中文文本纠错模型
这里提供三种文本纠错模型的实现

bert语言模型+字音字形相似度
correction_basic.py
缺点:
不能解决多字,少字问题
MLM
correction_mlm.py 利用bert的MLM训练机制实现纠错功能
输入: [CLS]错误句子[SEP][MASK][MASK]…[MASK][SEP]
输出: 正确句子
seq2seq
correction_seq2seq.py 使用文本生成的方式生成正确句子
输入: [CLS]错误句子[SEP][MASK][MASK]…[MASK][SEP
输出: 正确句子
*　缺点：推断速度比较慢

https://github.com/fushengwuyu/chinese_spelling_correction

Py_to_Java2021
关注
  • 1
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
自然语言处理实战项目15-四种文本纠错模型的对比与实践，解决大家写作问题
weixin_42878111的博客
08-14 829
大家好，我是微学AI，进入给大家介绍一下自然语言处理15-四种文本纠错模型的对比与实践，解决大家写作问题。文本纠错模型是一个旨在解决大家写作问题的实践项目。它基于先进的自然语言处理技术，特别是文本纠错领域的模型和算法，能够帮助用户快速、准确地纠正文本中的拼写错误、语法错误和其他常见的书写问题。
bert4keras.zip
06-21
简洁优雅的实现和调用bert方式，十行代码
文本纠错--CRASpell模型
weixin_42223207的博客
06-05 3154
文本纠错
文本纠错 N-gram 修改提示
南七小僧的学海无涯
10-17 5813
有幸参加研究生师兄的创新创业项目，一个和金融企业合作的对话文本分析与挖掘的项目。项目组从公司处获得语音识别后的客服对话文本，我们对文本进行纠错、情感分析与挖掘等并最终给公司反馈，让公司能够从客服对话文本中获得有效信息。我在项目中参与的部分是文本处理的第一步：文本检错纠错。这几个月中，在研究生师兄的带领下，我们基于机器学习构建了数个用于语音识别后文本的检错纠错模型，在此将主要的两个方法：n-gram...
文本纠错：自动检测和修复文本错误
AI架构设计之禅
03-02 853
文本纠错：自动检测和修复文本错误 作者：禅与计算机程序设计艺术 1. 背景介绍 1.1. 什么是文本纠错 文本纠错是指自动检测和修复文本中的错误，包括拼写错误、语法错误和语义错误等。这是一个长期存在的问题，尤其是在互联网时代，
NLP实践！文本语法纠错模型实战，搭建你的贴身语法修改小助手 ⛵
热门推荐
ShowMeAI研究中心
11-28 1万+
本文详细介绍 GECToR 这一优秀的文本纠错模型，使用 Transformer 编码器的序列标注器，以保证文本数据的质量，进而提升NLP模型的效果。
简洁优美的深度学习包-bert4keras
weixin_44597588的博客
04-01 5693
简洁优美的bert4keras
pip install自己的代码_PyCorrector文本纠错工具实践和代码详解
weixin_39892311的博客
10-30 1796
PyCorrector文本纠错工具代码详解1. 简介 中文文本纠错工具。音似、形似错字（或变体字）纠正，可用于中文拼音、笔画输入法的错误纠正。python3.6开发。pycorrector依据语言模型检测错别字位置，通过拼音音似特征、笔画五笔编辑距离特征及语言模型困惑度特征纠正错别字。1.1 在线Demohttps://www.borntowin.cn/product/corrector1.2 Q...
探秘BERT4Keras：轻松构建高效的深度学习模型
gitblog_00018的博客
03-21 284
探秘BERT4Keras：轻松构建高效的深度学习模型 项目地址:https://gitcode.com/bojone/bert4keras 在自然语言处理（NLP）领域，预训练模型如BERT已经取得了显著的突破。然而，将这些先进的模型应用到实际项目中并不总是那么简单。幸运的是，BERT4Keras项目由开发者@bojone创建，旨在提供一个简洁、高效且易于使用的接口，让Keras用户也能方便地利...
错字修改 | 布署1个中文文文本拼蟹纠错模型
HyperAI超神经
11-16 1569
谨慎输入，看谁离谱
中文纠错（Chinese Spelling Correct）最新技术方案总结
张伟的专栏
01-15 1460
中文纠错（Chinese Spelling Correct）最新技术方案总结 2021-03-20 15:58:01阅读：654来源：互联网 标签：bertendChinese模型字音Spelling纠错Correct向量 【腾讯云】云产品限时秒杀，2核4G 8M 80GB SSD仅74元/年,222元3年 目录 1 纠错基础知识 1.1 常见错误类型 1.2 纠错组成模块 2 深度学习技术 2.1 FASPell（爱奇艺） 2.1.1...
人工智能-项目实践-文本分类-本项目采用Keras和Keras-bert实现文本多标签分类任务，对BERT进行微调。
05-25
人工智能-项目实践-文本分类-本项目采用Keras和Keras-bert实现文本多标签分类任务，对BERT进行微调。 本项目采用Keras和Keras-bert实现文本多标签分类任务。 数据集 2020语言与智能技术竞赛：事件抽取任务 本...
基于BERT的文本纠错模型使用PyTorch实现源码+说明（课程设计）.zip
11-15
基于BERT的文本纠错模型使用PyTorch实现源码+说明（课程设计）.zip 这是95分以上高分必过课程设计项目，下载即用无需修改，确保可以运行。也可作为期末大作业。 基于BERT的文本纠错模型使用PyTorch实现源码+说明...
Python库 | bert4keras-0.9.6.tar.gz
05-12
资源分类：Python库 所属语言：Python 资源全名：bert4keras-0.9.6.tar.gz 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
项目实战-Bert文本分类（keras-bert实现）源代码及数据集.zip
04-09
1、内容概要：本资源主要基于bert（keras）实现文本分类，适用于初学者学习文本分类使用。 2、数据集为电商真实商品评论数据，主要包括训练集...4、源代码：bert_model.py是基于keras-bert构建Bert模型对文本进行分类。
2024年全球嵌入式配电盘行业总体规模、主要企业国内外市场占有率及排名.docx
04-15
2024年全球嵌入式配电盘行业总体规模、主要企业国内外市场占有率及排名
AccessControl-6.3-cp39-cp39-manylinux_2_17_aarch64.whl.zip
04-15
AccessControl-6.3-cp39-cp39-manylinux_2_17_aarch64.whl.zip
AccessControl-6.0-cp37-cp37m-manylinux_2_5_x86_64.whl.zip
04-15
AccessControl-6.0-cp37-cp37m-manylinux_2_5_x86_64.whl.zip
【Python-WEB自动化-06课-对验证码的处理】
最新发布
04-15
【Python-WEB自动化-06课-对验证码的处理】
bert4keras版本
07-28
根据引用\[1\]中的信息，安装bert4keras时会自动重新安装keras，而默认安装的版本是keras2.3.1。所以，bert4keras的版本应该是与keras2.3.1兼容的版本。 #### 引用[.reference_title] - *1* [安装bert4keras时要注意...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值