![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NLP
文章平均质量分 79
GF心流
龙场悟道
展开
-
实测有效-高速下载hugginface model & datasets
利用 HuggingFace 官方的下载工具和从上对模型和数据集进行高速下载转载 2024-01-09 10:01:16 · 1182 阅读 · 1 评论 -
ChatGLM-LLaMA-chinese-insturct 学习记录(含LoRA的源码理解)
ChatGLM-LLaMA-chinese-insturct 学习记录(含LoRA的源码理解)原创 2023-05-08 11:57:46 · 1498 阅读 · 1 评论 -
基于本地知识构建简易的chatPDF
介绍:一种利用 ChatGLM-6B + langchain 实现的基于本地知识的 ChatGLM 应用Github:这里的整体逻辑还是相对比较简单的,每个环节都还可以继续优化,作者在群里说了,项目代码已经在持续优化中了。原创 2023-04-26 19:39:15 · 2534 阅读 · 1 评论 -
ChatGLM-6B论文代码笔记
chatglm-6b原创 2023-04-12 12:05:26 · 3765 阅读 · 2 评论 -
简读 General Language Model Pretraining with Autoregressive Blank Infilling
GLM模型原创 2023-04-05 19:23:26 · 518 阅读 · 1 评论 -
InstructGPT论文笔记
instructGPT论文笔记原创 2023-03-01 16:54:08 · 649 阅读 · 2 评论 -
Bert-flow模型的理论基础【转】和理解
Bert-flow模型的理论基础和理解1- 理论基础2- flow模型的理解3- Bert-flow模型4- 自己的实验和心得我只是大佬的搬运工!文本的主要内容是记录下自己学习Bert-flow的流程,从论文的出来,到各大大佬对其的解读,自己的理解还是不到位的,其主要原因是数学没有跟上,于是记录下自己的看过的博客。1- 理论基础这部分主要是对数据基础的理解,可以参照以下博客:flow的理论基础2- flow模型的理解主要参考苏神的讲解,稍微百度了下,属苏神讲解的详细细水长flow之NICE:流原创 2021-01-13 15:27:08 · 1495 阅读 · 1 评论 -
多标签、类别不均衡分类问题
最近老是遇到多标签分类问题????,加之自己对loss的理解还是不够到位整理以下链接以作学习参考使用:多标签分类:定义、思想和算法主要是将多标签分类的定义,思考和一些解决办法。????multilabel_categorical_crossentropy????损失函数主要是介绍了两个损失函数的区别:????categorical_crossentropy????????binary_crossentropy????二分类、多分类与多标签问题的区别及对应损失函数的选择这篇主要分析了so原创 2020-09-23 16:59:04 · 6332 阅读 · 3 评论 -
指代消解模型浅析
本文主要根据以下几个方面进行阐述:01 指代消解主流模型02 模型分析03 数据集介绍04 模型调研结果及调试过程记录01 指代消解的主流模型指代消解任务再OntoNotes数据集上的刷榜记录16年Clark等人发表 《Improving Coreference Resolution by Learning Entity-Level Distributed Representations》论文下载:https://arxiv.org/abs/1606.01323该文章使用4个深度学习模块原创 2020-09-04 15:23:17 · 2640 阅读 · 5 评论 -
指代消解开源工具
01 简介指代消解是自然语言处理的一大任务之一,它是信息抽取不可或缺的组成部分。在信息抽取中,由于用户关心的事件和实体间语义关系往往散布于文本的不同位置,其中涉及到的实体通常可以有多种不同的表达方式,例如某个语义关系中的实体可能是以代词形式出现的,为了更准确且没有遗漏地从文本中抽取相关信息,必须要对文章中的指代现象进行消解。指代消解不但在信息抽取中起着重要的作用,而且在机器翻译、文本摘要和问答系统等应用中也极为关键。02 数据集KBP2015/2016 文本指代分析英文数据集ACE2005(跨文本指原创 2020-09-04 15:04:34 · 2480 阅读 · 1 评论 -
Onnx高效推理框架
Onnx推理框架:参考:Inference PyTorch Bert Model with ONNX Runtime on GPUpytorch官网说明Supported Operator Onnx支持的算子https://pytorch.org/docs/stable/onnx.html?highlight=onnx%20runtimeSupported Model Onnx支持的模型:AlexNetDCGANDenseNetInception (warning: this m原创 2020-09-04 15:00:33 · 3538 阅读 · 2 评论 -
基于知识图谱的问答系统(下)
基于知识图谱的问答系统(下)本项目是基于知识图谱的问答系统,BERT+BILSTM+CRF做命名实体识别和句子相似度比较,最后实现线上的部署。项目的分以下步骤进行描述:1-项目介绍- 1.1-数据集介绍- 1.2-技术方案流程- 1.3-评价标准2-命名实体识别模型训练代码理解- 2.1-数据集准备- 2.2-数据预处理- 2.3-定义主模型- 2.4-开始训练3-BE...原创 2020-03-12 06:03:36 · 9363 阅读 · 21 评论 -
基于知识图谱的问答系统(上)
基于知识图谱的问答系统(上)本项目是基于知识图谱的问答系统,BERT+BILSTM+CRF做命名实体识别和句子相似度比较,最后实现线上的部署。项目的分以下步骤进行描述:1-问答QA系统简单介绍- 1.1-问答系统目标- 1.2-问答系统分类- 1.3-问答系统框架2-知识库问答KB-QA介绍1-问答QA系统简单介绍-1.1-问答系统目标总目标:给定一个自然语言的问题,能够得...原创 2020-03-06 17:29:13 · 7604 阅读 · 0 评论 -
机器阅读理解总结
机器阅读理解总结引言本文主要是总结下自己最近学习到的机器阅读理解的相关知识。文章的主要结构分以下步骤:常见的机器阅读理解的任务阅读理解任务的分析以及解决机器阅读理解的模型分析这些模型之间的差异阅读理解任务主要是让机器根据给定的文本回答与文本相关的问题,15年以前由于小规模的数据集和基于规则的方法问题不能兴起,后面兴起了是因为:1、深度学习框架的阅读理解提出。2、大规模数据集的公布...原创 2020-03-05 23:26:24 · 1760 阅读 · 1 评论 -
New Pointer-Generator Networks for Summarization
指针生成网络之文本摘要文章目录文本摘要任务介绍模型数据数据集来源数据分析数据预处理实验结果评估结果分析改进措施,及实验效果文本摘要任务介绍文本摘要主要分为两种模式:一种是生成式,一种是抽取式。其中...原创 2020-03-02 21:15:09 · 3103 阅读 · 6 评论