使用Python自动生成事件分析图谱，Python开发面试2024

最新推荐文章于 2024-07-12 16:16:27 发布
最新推荐文章于 2024-07-12 16:16:27 发布
阅读量375 收藏 8
点赞数 5
分类专栏： 2024年程序员学习 文章标签： python 面试 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_60635609/article/details/136910331
版权

在这里插入图片描述

运行text.py，得到自动生成的graph.html文件。

在这里插入图片描述

分析

本项目采用了高频词，关键词，命名实体识别，主谓宾短语识别等抽取方式，并尝试将三类信息进行图谱组织表示，这种表示方式是一种尝试。

主要的信息处理分为以下几个步骤：

1)对文章进行处理，处理内容包括去噪、长句切分、短句切分

在这里插入图片描述

在这里插入图片描述

最低0.47元/天 解锁文章
Java有多久学会
关注
  • 5
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
2024年最全使用Python自动生成事件分析图谱(1)，蚂蚁金服Python面经
m0_61409092的博客
05-04 465
现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。
基于BERT事件抽取构建活动知识图谱python源码+项目说明.zip
10-12
【资源说明】 基于BERT事件抽取构建活动知识图谱python源码+项目说明.zip 主要思路： 这是一个基于深度学习的事件抽取。将任务分割为触发词抽取，论元抽取，属性抽取。具体而言是论元和属性的抽取结果依赖于触发词，因此只有一步误差传播。因 time loc 并非每个句子中都存在，并且分布较为稀疏，因此将 time & loc 与 sub & obj 的抽取分开（role1 提取 sub & obj；role2 提取 time & loc） 模型先进行触发词提取，由于数据集的特殊性，模型限制抽取的事件仅有一个，如果抽取出多个触发词，选择 logits 最大的 trigger 作为该句子的触发词，如果没有抽取触发词，筛选整个句子的 logits，取 argmax 来获取触发词； 然后根据触发词抽取模型抽取的触发词，分别输入到 role1 & role2 & attribution 模型中，进行后序的论元提取和属性分类；四种模型都是基于 Roberta-wwm 进行实验，加入了不同的特征。 最后将识别的结果进行整合，得到提交文件。 三、四见pdf 五、项目优缺点 优点： 1、舍弃CRF结构，采用指针式解码的方案，并利用trigger字典。如果未解码出trigger，则比较句子中匹配知识库的所有distant trigger 的 start + end logits，选取最大的一个作为解码出的 trigger 2、具体而言是论元和属性的抽取结果依赖于触发词，因此只有一步误差传播。 3、根据数据的特征，限制解码输出一个trigger，如果解码出多个trigger，选取 logits 最大的那个trigger作为候选trigger 4、根据数据的特点，发现绝大数都有触发词，故采用trigger左右两端动态池化特征作为全局特征； 5、因 time loc 并非每个句子中都存在，并且分布较为稀疏，将 time & loc 和 subject & object 的提取分开，采用两个独立的模型进行提取。 6、由于样本类别不均极其严重，采用10折交叉验证的方法来提升模型的泛化性能。 缺点： 1、因为测试集中的数据不是每一个都带时间和地点，所以时间和地点抽取效果不是很好，如一个句子里存在两个时间，只能抽取前面的时间，但比赛数据的测试集只有一个时间效果很好，只有两条数据集有地点； 2、由于测试集部分数据的trigger词在后面，sub和obj识别顺序会颠倒； 3、特殊测试集trigger与数据集trigger库不一致情况下，无法抽取trigger，但可以在trigger字典库中手动添加 【备注】 1、该资源内项目代码都经过测试运行成功，功能ok的情况下才上传的，请放心下载使用！ 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载使用，也适合小白学习进阶，当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行，也可在此代码基础上进行修改，以实现其他功能，也可直接用于毕设、课设、作业等。 欢迎下载，沟通交流，互相学习，共同进步！
关于知识图谱基于数据集的自动化构建——Python代码实现
m0_62848914的博客
03-04 669
关于知识图谱基于数据集的自动化构建——python代码实现
使用Python自动生成事件分析图谱
大邓和他的Python
11-28 2048
内容编辑:想读博的针针 中山大学图书情报学硕士，python爱好者如何将输入的文档转变为只含有关键信息的图谱?本文来自https://github.com/liuhuanyong/Te...
学了那么久Python还什么都做不了，我觉得你该试试这个方法了
热门推荐
龙叔的博客
11-08 1万+
答应我，别再做无用功了
python毕业设计基于事理图谱的事件推理系统项目源码+全部数据.zip
11-14
python毕业设计基于事理图谱的事件推理系统项目源码+全部数据.zip 主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者。也可作为课程设计、期末大作业。包含全部项目源码、该项目可以直接作为毕设使用。项目都经过严格调试，下载即用确保可以运行！ python毕业设计基于事理图谱的事件推理系统项目源码+全部数据.zip 主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者。也可作为课程设计、期末大作业。包含全部项目源码、该项目可以直接作为毕设使用。项目都经过严格调试，下载即用确保可以运行！python毕业设计基于事理图谱的事件推理系统项目源码+全部数据.zip 主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者。也可作为课程设计、期末大作业。包含全部项目源码、该项目可以直接作为毕设使用。项目都经过严格调试，下载即用确保可以运行！python毕业设计基于事理图谱的事件推理系统项目源码+全部数据.zip 主要针对计算机相关专业的正在做毕设的学生和需要项目实战练习的学习者。也可作为课程设计、期末大作业。包含全部项目源码、该项目可以直接作为毕设使用
py-pptx:利用python自动生成数据分析PPT报告
05-16
自动生成数据分析报告（PPT格式） 目录说明： py-pptx -auto_report # 核心代码目录 -resources # 资源目录 -data # 数据文件存放目录 -driver # 浏览器驱动位置 -report # 报告生成位置，报告临时文件存放目录 -...
使用Python自动生成HTML的方法示例
01-21
python 自动化批量生成前端的HTML可以大大减轻工作量 下面演示两种生成 HTML 的方法 方法一：使用 webbrowser #coding:utf-8 import webbrowser #命名生成的html GEN_HTML = test.html #打开文件，准备写入 f = ...
使用python自动生成文字视频
06-27
使用python生成文字视频
芯片开发开源寄存器工具 使用python生成寄存器
05-31
例如，可以使用Python解析定义寄存器的JSON或XML文件，然后自动生成C/C++驱动程序、Verilog模块，甚至是Markdown格式的用户手册。 在标签中，"python"表示我们使用的是Python编程语言，"源码软件"可能指的是该工具...
cv2读取和保存图片
最新发布
m0_53291740的博客
07-12 165
cv2.imwrite('b\\img1.png',img)#b存在就可以保存进去。如果b存在，c不存在，程序不会报错，也不会保存图片。如果目录b不存在就会存到当前文件夹。
面试题 21：解释 Python 中的 help() 函数和 dir() 函数？
专注于全栈开发领域
07-10 759
在Python中，help()和dir()是两个非常有用的内置函数，它们可以帮助开发者更好地了解Python对象和模块。
Nginx七层（应用层）反向代理：UWSGI代理uwsgi_pass篇
jclee95的个人博客
07-10 1072
Nginx提供了多种应用层反向代理支持，包括proxy_pass、uwsgi_pass、fastcgi_pass和scgi_pass等。其中，proxy_pass指令可以接受一个URL参数，用于实现对HTTP/HTTPS协议的反向代理；uwsgi_pass用于代理到uWSGI应用服务器；fastcgi_pass用于代理到FastCGI服务器；而scgi_pass则用于代理到SCGI（Simple Common Gateway Interface）应用。这些指令使Nginx能够灵活地处理不同类型的后端服务和应
聊聊如何在内网下构建大模型微调环境
python1234567_的博客
07-12 771
LlamaFactory新版更新后，还是比较方便，只是说llamafactory-cli命令的确是有点蒙，踩个坑就好了。对于LlamaFactory微调来说，本身不难，毕竟都是配置；主要是在内网环境下的依赖包拉取安装是真麻烦，但其实也还好。走一遍的话，还是可以学到很多的。​。
leetcode--验证二叉搜索树
liulanba的博客
07-09 667
给你一个二叉树的根节点 root ，判断其是否是一个有效的二叉搜索树。有效 二叉搜索树定义如下：节点的左子树只包含 小于 当前节点的数。节点的右子树只包含 大于 当前节点的数。所有左子树和右子树自身必须也是二叉搜索树。示例 1：输入：root = [2,1,3]输出：true示例 2：输入：root = [5,1,4,null,null,3,6]输出：false解释：根节点的值是 5 ，但是右子节点的值是 4。提示：树中节点数目范围在[1, 104] 内。
已解决 javax.xml.transform.TransformerFactoryConfigurationError 异常的正确解决方法，亲测有效！！！
小明的Java问道之路
07-08 2557
已解决 javax.xml.transform.TransformerFactoryConfigurationError 异常的正确解决方法，亲测有效！！！
事件图谱python自动生成
07-29
下面介绍如何使用Python来自动生成事件图谱。 首先，我们需要使用Python的NLP库，如NLTK或Spacy来对文本进行分词、词性标注和句法分析。这些库可以自动将文本转换为标准的语言结构，方便处理和提取关键信息。 接...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值