用深度学习做命名实体识别(附代码)

最新推荐文章于 2024-05-30 11:30:34 发布
最新推荐文章于 2024-05-30 11:30:34 发布
阅读量364 收藏 2
点赞数
文章标签： 人工智能 matlab
原文链接：http://www.cnblogs.com/lookfor404/p/9344646.html
版权

基于CRF做命名实体识别系列

用CRF做命名实体识别(一)
用CRF做命名实体识别(二)
用CRF做命名实体识别(三)

摘要

1. 之前用CRF做了命名实体识别，效果还可以，最高达到0.9293，当然这是自己用sklearn写的计算F1值，后来用conlleval.pl对CRF测试结果进行评价，得到的F1值是0.9362。

2. 接下来基于BILSTM-CRF做命名实体识别，代码不是自己写的，用的github上的一个大佬写的，换了自己的数据集，得到最终的结果是0.92。

3. 本文主要简单的介绍下BILSTM-CRF的原理，以及如何把大佬的数据集换成我们自己的数据集，进行训练。

详细内容欢迎大家去看 我的简书

转载于:https://www.cnblogs.com/lookfor404/p/9344646.html

weixin_34342578
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
命名实体识别的一点经验
lipengyuer的博客
04-25 1971
最近做了一点微小的工作，搞了下命名实体识别(named entity recongnition, NER)，这里总结一下目前的认识。内容比较杂，先亮一下目录，如图0-1. 标题 1什么是命名实体 1.1什么是实体 实体(entity)指客观存在、并可相互区别的事物(https://baike.baidu.com/item/%E5%AE%9E%E4%BD%93/422661)。...
NLP入门（四）命名实体识别（NER）
weixin_34331102的博客
11-14 1447
  本文将会简单介绍自然语言处理（NLP）中的命名实体识别（NER）。  命名实体识别（Named Entity Recognition，简称NER）是信息提取、问答系统、句法分析、机器翻译等应用领域的重要基础工具，在自然语言处理技术走向实用化的过程中占有重要地位。一般来说，命名实体识别的任务就是识别出待处理文本中三大类（实体类、时间类和...
【传知代码】命名实体识别（论文复现）
ztK63LrD的博客
05-30 986
在自然语言处理（NLP）领域，实体识别任务（Named Entity Recognition,简称NER）被视为一个核心任务，其主要目的是从文本资料中进行实体的识别和分类命名。命名实体一般都是由专有名词组成的，例如人名，地名和组织名。下面的图示展示了一个基础的实体提取任务，该任务从句子中提取了阿里巴巴（组织名）、马云（人名）以及杭州（地名）这三个不同的实体：NER 的主要目标是找到文本中有意义的实体，并将其归类到预定义的类别中。以下是一些常见的类别：人名（Person）：例如“乔布斯”、“马云”。
命名实体识别的语料和代码（部分）
qq_19072921的博客
04-01 1261
1.用规则做命名实体识别 原文：用规则做命名实体识别——NER系列（一） 这篇博文就不放出代码了，因为现在基本上不用规则做命名实体识别，当然除非你在某些特定的语料有规律，就完全可以用正则表达式来做。 2.用HMM做命名实体识别 原文：用隐马尔可夫模型(HMM)做命名实体识别——NER系列（二） 代码和语料：https://github.com/lipengfei-558/hmm_ner_organization 3.用CRF做命名实体识别 原文：用CRF做命名实体识别——NER系列（
【NLP】BiLSTM 命名实体识别 手写代码
myaijarvis notebook
04-23 2558
【参考：pytorch_BiLSTM 命名实体识别 手写代码_哔哩哔哩_bilibili】 【参考：shouxieai/nlp-bilstm_crf-ner: nlp-bilstm+crf-ner】 """ 2022/4/22 """ import os import numpy as np import torch import torch.nn as nn from torch.utils.data import DataLoader, Dataset import torch.optim as op
中文命名实体识别的实战代码
升级迭代
08-26 3442
基于BERT预训练的中文命名实体识别TensorFlow实现 https://blog.csdn.net/macanv/article/details/85684284 https://github.com/wusaisa/BERT-BiLSTM-CRF-NER
基于tensorflow深度学习的命名实体识别.zip
04-24
在深度学习领域，命名实体识别（NER）是一项关键任务，它涉及到从文本中识别出具有特定意义的实体，如人名、地名、组织名等。在这个“基于tensorflow深度学习的命名实体识别”项目中，开发者利用TensorFlow这一强大...
人工智能-项目实践-实体识别-基于tensorflow深度学习的中文的命名实体识别
05-26
人工智能-项目实践-实体识别-基于tensorflow深度学习的中文的命名实体识别 一个中文的实体命名识别系统 当前版本基于双向循环神经网络（BiRNN） + 条件随机场（CRF）来完成实体的标注。 基本思路是利用深度神经...
基于tensorflow深度学习的中文的命名实体识别
05-17
一个中文的实体命名识别系统 当前版本基于双向循环神经网络（BiRNN） + 条件随机场（CRF）来完成实体的标注。 基本思路是利用深度神经网络提取特征，从而避免了手动提取特征的麻烦。 第二部和传统的方式一样，使用...
基于深度学习BiRN算法的中文的命名实体识别python源码+使用说明（毕业设计）.zip
最新发布
06-26
基于深度学习BiRN算法的中文的命名实体识别python源码+使用说明（毕业设计）.zip 【1】项目代码完整且功能都验证ok，确保稳定可靠运行后才上传。欢迎下载使用！在使用过程中，如有问题或建议，请及时私信沟通，帮助...
【NLP】命名实体识别demo代码解读
01-20
完整代码获取：公众号后台回复（命名实体识别demo代码解读） 主要部分 Embedding input： 所有文字的字典文件，{index：word,…}； 所有文字的embedding文件，{word:embedding,…}； output： 将字典中的文字全部用...
知识图谱学习系列之二：命名实体识别1（技术及代码）
芳樽里的歌的博客
11-24 7546
命名实体识别，Named Entity Recognition，简称NER。指的是构建合适的模型，从给定的数据（常常是文本）中得到所需实体的过程。 什么是命名实体 命名实体指的就是所有以名称来作为标识的实体。在有的资料中，将命名实体分为三大类（实体类、时间类和数字类）七小类（人名、地名、机构名、时间、日期、货币和百分比）...
逐行讲解BiLSTM+CRF实现命名实体识别(NER)
芒果不茫的博客
02-05 7488
使用BiLSTM+CRF做中文命名实体识别(NER)，数据处理、建立词表、模型构建、训练过程书写等，代码有详细注释，若有遗漏或不详细可评论补充。
【NER】命名实体识别：详解BiLSTM_CRF_Pytorch_Tutorial代码
zenRRan的博客
03-13 1019
点击上方，选择星标，每天给你送干货！来自：python遇见NLP导读：本文主要解析Pytorch Tutorial中BiLSTM_CRF代码，几乎注释了每行代码，希望本文能够帮助大家理解这...
自然语言处理（二）——词性标注与命名实体识别
南木的博客
05-24 3781
文章目录一、Jieba二、NLPIR三、nltk四、SnowNLP五、StandFordNLP六、thulac七、StandfordNLP八、结论 本次依然使用上篇博客（自然语言处理（一）——中英文分词）中我们使用过的工具，来对中英文文本进行词性标注与命名实体识别。 一、Jieba 词性标注与命名实体识别 二、NLPIR NLPIR词性标注与命名实体识别 三、nltk nltk词性标注与命名实...
基于BERT/ERNIE的中文命名实体识别的Pytorch实现
Zac_B的博客
08-23 5759
基于BERT的中文命名实体识别的Pytorch实现ERNIE-NER-pytorchTODO前言ImplementationExperimentDatasetResultConfigurationScript ERNIE-NER-pytorch   Github：https://github.com/ZacBi/BERT-NER-Pytorch   出现bug或者对code内容有疑问的可以提交到...
Pytorch: 命名实体识别: BertForTokenClassification/pytorch-crf
Wangpeiyi9979的博客
04-27 1万+
文章目录基本介绍BertForTokenClassficationpytorch-crf实验项目参考 基本介绍 命名实体识别：命名实体识别任务是NLP中的一个基础任务。主要是从一句话中识别出命名实体。比如 姚明在NBA打球 从这句话中应该可以识别出姚明(人), NBA(组织)这样两个实体。 常见的方法是对字或者词打上标签。B-type, I-type, O， 其中B-type表示组成改类型...
用BILSTM+CRF模型进行命名实体识别
weixin_38241876的博客
05-24 7727
原文地址：https://arxiv.org/pdf/1603.01360.pdf 摘要 命名实体识别的最先进系统严重地依赖手工生产特征和特定领域的知识，以便有效地从现有的小型、有监督的训练语料库中学习。本文介绍了基于双向LSTMS和条件随机场的两种新的神经结构，另一种...
基于BERT的中文命名实体识别
热门推荐
Mrhan的博客
03-23 1万+
代码和数据都存放在了github上：https://github.com/xuanzebi/BERT-CH-NER 欢迎大家STAR啊，来让我收获人生的第一个STAR吧 2333~~~~~ 基于上课老师课程作业发布的中文数据集下使用BERT来训练命名实体识别NER任务。 之前也用了Bi+LSTM+CRF进行识别，效果也不错，这次使用BERT来进行训练，也算是对BERT源码进行一个阅读...
命名实体识别实体级评估代码
06-09
命名实体识别（Named Entity Recognition, NER）是自然语言处理中的一个重要任务，用于识别文本中具有特定意义的实体，如人名、地名、组织机构名等。实体级评估通常是NER任务完成后对模型性能的定量评价，它关注的是...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值