金庸小说人物知识图谱构建——人名提取

已于 2022-09-11 17:59:45 修改
阅读量1.1k 收藏 3
点赞数 2
分类专栏： 知识图谱 文章标签： 知识图谱
于 2022-07-11 17:07:55 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_53046782/article/details/125724162
版权
该博客介绍了如何运用stanfordcorenlp工具进行命名实体识别，从金庸小说中提取人名，以构建知识图谱。提取的人名经过人工校验后保存为txt文件，为后续的知识图谱构建打下基础。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

本步的思路是运用命名实体识别工具来提取小说中的人名

我用的工具是stanfordcorenlp，当然还有其他的工具可以选择，如snownlp，THULAC等，我将提取的人名保存在txt文件中，经过人工去错后，得到如下人名：

《雪山飞狐》部分人名

提取人名的代码如下

#写入txt文件
from stanfordcorenlp import StanfordCoreNLP

nlp = StanfordCoreNLP(r'D:\java\stanford-corenlp-4.2.2', lang='zh')

with open(
最低0.47元/天 解锁文章
【知识图谱】命名实体识别（NLP）
风口IT猪的成长录
06-15 5285
命名实体识别实验内容实验原理命名实体识别任务序列标注条件随机场BiLSTM-CRF实验步骤1. 数据处理1.1将标注转换为 BMEO 格式1.2 数据集预处理2. 构建网络模型3. 模型训练4. 模型预测总结 实验内容 从本实验开始，我们将学习如何从不规则的文本中提取信息，将信息规则化，从而构建可以生成知识图谱的数据。 在本节实验中，我们学习如何从文本中识别命名实体。 在本实验中，你将掌握 命名实体识别任务的定义与理论解决方法 命名实体识别任务中的数据集处理方法 命名实体识别模型——BiLstm-CRF
OpenKG开源系列 | 人物百科知识图谱（东南大学）
开放知识图谱
04-20 1199
OpenKG地址：http://openkg.cn/dataset/figure-kgGitHub地址：https://github.com/F-period/Open_Chinese_Figure_KG/开放许可协议：CC BY 4.0贡献者：东南大学（王然，漆桂林，殷春锁，王鹏，金日辉）1、图谱简介以人物为中心的知识图谱可以有效地显示个人信息和人际关系，并进一步支持相...
金庸小说人物知识图谱构建——图谱可视化
m0_53046782的博客
09-11 936
将人物间的共现频次提取处理，形成CSV文件，导入Gephi形成图谱。
jieba分词提取小说人名
Michael是个半路程序员
10-27 8521
文章目录1. 读入文本2. 分词3. 计数4. 排序5. 添加用户字典 以《神雕侠侣》为例： 使用 jieba.posseg获取词性，人名的词性为 nr 1. 读入文本 import jieba.posseg as psg with open('shendiaoxialv.txt',encoding='utf-8') as f: text = f.readlines() print(text[:10]) 输出： ['\ufeff 第 一 回\u3000风月无情\n', '\n', ' “
Python学习之路-NLP（人物提取）
m0_58998775的博客
06-11 3740
import os import jieba.posseg as psg import jieba import time import re novel = 'hlm' dir = './Text/'+novel #jieba.load_userdict(dir+'/mydict.txt') # 字典合并 def combineListToDic(list): if len(list) <= 1: return list temp = {} for l i.
金庸小说人物知识图谱构建——构建共现矩阵
m0_53046782的博客
09-11 1484
两两人物间的数字对应他们的共现频次，代表他们在多少个章节中共同出现了，对角线上的频次定义为0，共现频次越高，人物间的关系可能越紧密。得到的共现人物共现关系excel表，构建人物间的共现矩阵，如下图。代码里有文件路径需要改成自己的。
一个小脚本从小说中过滤出经常出现的人名
做美好的人，做酷的事
06-05 292
一个小脚本从小说中过滤出经常出现的人名 花名获取利器！ 作者：高鹏 小说中，人名后经常跟着一个动词或者介词，根据这一点可以找出常见的人名。下面用一个小shell脚本来玩一下^.^ 脚本如下: [code="shell"] #!/bin/sh # name:filter_name.sh # JH Gao # function:从小说中过滤出经常出现的人名 # 主要步骤如下：...
看“降龙”绝技——浅析知识图谱技术生态链
AI课工场
09-15 373
人工智能发展到今天，以深度学习和知识图谱为代表的感知智能（主要集中在对于图片、视频以及语音的能力的探究）和认知智能（涉及知识推理、因果分析等），得到越来越多的应用，知识图谱逐渐成为关键技术之一，现已被广泛运用到智能搜索、智能问答、个性化推荐、内容分发等领域。知识图谱在2012年由谷歌提出，旨在描述现实世界中存在的实体以及实体之间的关系。它把复杂的知识领域通过数据挖掘、信息处理、知识计量和图形绘制出来，探索知识领域的动态发展规律，它不是指某一特定的模型，是指一类模型、一种技术体系。 知识图谱..
金庸小说人物知识图谱构建——获取共现关系
m0_53046782的博客
09-11 968
爬虫提取共现人物关系
知识图谱项目——红色文化之张学良人物知识图谱（Neo4j+vue+flask+mysql实现）
AI~天海的博客
06-17 4692
本项目为人工智能专业大三知识图谱课程期末作业。意在完成一个以张学良为背景的红色文化类知识图谱。文末放上本项目的代码地址。
基于Python实现几本小说的知识图谱建立
毕业作品网站
05-28 2578
对语料的标注，是否可以采用其他更好的办法；作为通用模型，标注的数量还远远不够；模型的选择方面，是否可以其他更好的模型；对预测的结果，如何能更好地提取出三元组；将三元组扫入至图数据库中，能否做到实体对齐，且能做一些实体关系的分析与推理。
探秘《小说知识图谱》：深度挖掘文学宝藏
gitblog_00056的博客
04-21 545
探秘《小说知识图谱》：深度挖掘文学宝藏 去发现同类优质开源项目:https://gitcode.com/ 在数字化的时代，数据已经成为一种新的语言，而知识图谱则是将复杂信息结构化的有效工具。今天，我们来深入探讨一个独特的开源项目——《小说知识图谱》，它是由刘宇张olvz创建并维护的一个专为小说构建的知识图谱库。 项目简介 该项目旨在通过自然语言处理（NLP）和信息提取技术，将海量的小说文本转化为结...
金庸小说人物知识图谱构建——以《雪山飞狐》为例
m0_53046782的博客
01-26 3118
最终效果图
开源开放 | 中国近代历史人物知识图谱
开放知识图谱
12-03 3421
OpenKG地址：http://openkg.cn/dataset/zgjdlsrw项目地址：http://www.zjuwtx.work/project/kg开放许可协议：CC BY-S...
人名分类器(nlp)
最新发布
weixin_43147086的博客
11-25 570
'当前的训练批次：%d, 平均损失：%.5f, 训练时间：%.3f, 准确率：%.2f' % (total_loss_list = [] # 每隔多少步存储loss。# 每隔 100 步存储avg-loss acc。total_iter_num = 0 # 已经训练好的样本数。total_acc_list = [] # 存储间隔准确率。print('字符表的长度：', n_letter)# 02 根据idx拿到人名 国家名。# 保存一下平均损失。# 用于获得常见字母及字符规范化。
利用飞讯语义识别API 获取微小说所有角色名
魁北克之旅的博客
08-30 644
利用飞讯语义识别API 获取微小说所有角色名 1、代码： #!/usr/bin/python # -*- coding: UTF-8 -*- import os, sys import math import time import urllib.request import urllib.parse import json import hashlib import base64 names = {} relationships = {} lineNames = [] str0 = '' tempSt
HugeGraph图数据库构建红楼梦人物关系知识图谱实例
tomalun的专栏
07-02 4501
HugeGraph是一款易用、高效、通用的开源图数据库系统（Graph Database，GitHub项目地址）， 实现了Apache TinkerPop3框架及完全兼容Gremlin查询语言， 具备完善的工具链组件，助力用户轻松构建基于图数据库之上的应用和产品。 HugeGraph-Studio：HugeGraph-Studio是HugeGraph的Web可视化工具，可用于执行Gremlin语句及展示图。 本文详细介绍在HugeGraph-Studio可视化界面上执行Gremlin语句构建红楼梦贾府人
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值