- 博客(51)
- 收藏
- 关注
RSS订阅原创 python借助elasticsearch实现标签匹配计数
给定一组标签 [{“tag_id”: “1”, “value”: “西瓜”}, {“tag_id”: “1”, “value”: “苹果”}]，我想精准匹配到现有的标签库中存在的标签并记录匹配成功的数量。
2024-04-16 18:14:12
452
原创 python借助elasticsearch实现精准查询与bm25查询
Elasticsearch query查询；python向量库；bm25搜索，精准匹配
2024-03-05 14:59:21
514
原创 Celery结合flask完成异步任务与定时任务
Celery 常用于 web 异步任务、定时任务等。使用 redis 作为 Celery的「消息代理 / 消息中间件」。这里通过Flask-Mail使用qq邮箱延时发送邮件作为示例。
2023-09-25 15:39:22
937
3
原创 常见优化器总结
优化器 是为了让参数根据损失函数更快更准的朝着最优方向更新的一种策略。神经网络是根据损失函数不断调整网络参数，使得最终能够获得近似最优解。
2023-09-21 20:28:03
242
1
原创 CopyRE关系抽取
模型包括编码器和解码器两部分编码器：将输入的句子（源句子）转换为固定长度的语义向量 解码器：读取该矢量并直接生成三元组。
2023-07-10 15:27:09
372
1
原创 条件随机场模型
线性链条件随机场用于标注问题，在条件概率模型P(Y|X)中，Y是输出变量表示标记序列，X是输入变量表示需要标注的观测序列。设有联合分布P(Y)，由无向图G=(V, E)表示，在图G中，节点表示随机变量，边表示随机变量之间的依赖关系。均为线性链表示的随机变量序列，若在给定随机变量序列X的条件下，随机变量序列Y的条件概率分布P(Y|X)构成条件随机场，即满足马尔可夫性。条件随机场，设X与Y是随机变量，P(Y|X)是在给定X的条件下Y的条件概率分布。对任意结点v成立，则称条件概率分布P(Y|X)为条件随机场。
2023-05-31 16:30:09
1143
原创 隐马尔科夫模型
隐马尔可夫模型是关于时序的概率模型，描述由一个隐藏的马尔科夫链随机生成不可观测的状态的序列，再由各个状态随机生成一个观测而产生观测的序列的过程。
2023-05-31 14:08:58
799
原创 激活函数（Activation functions）
激活函数（Activation functions）对于人工神经网络 模型去学习、理解非常复杂和非线性的函数来说具有十分重要的作用。
2023-05-26 17:32:36
1042
原创 TPlinker解读
TPLiner，解决了之前的联合抽取模型中出现的问题，曝光偏差，即在训练阶段，与推理阶段不一致产生的影响，在解码阶段需要分多步进行,这也是它们存在曝光偏差的本质原因，TPLinker 将联合抽取描述为一个 token 对链接问题，并引入了一种新的连接方式。
2023-05-25 15:56:31
1775
转载 手动计算神经网络
神经网络最骨干的结构是由一层层相互连接的神经元组成的，信息在多个层中由前往后计算最后输出结果，这种模型称为多层感知机（MLP）；为了训练出一个能够解决问题的MLP，我们使用数据通过求误差最小化的方法更新MLP的参数，这种方法称为反向传播（Back Propagation ）算法。于是MLP+BP算法就是最经典的深度学习模型之一”在小红书上看到一篇关于神经网络的介绍，精简易懂，转载一下。
2023-02-23 12:00:04
108
原创 事理知识图谱
事理知识图谱可以将文本中对事件以及事件之间的关系抽取并抽象出来，构建成一个有向图形式的事理知识库。在结构上，事理知识图谱是一个有向有环图，其节点表示事件，有向边表示事件之间的演化关系，比如顺承、因果、条件和上下位等逻辑关系。事理知识图谱是描述事件之间演化规律和模式的事理逻辑知识库。
2023-02-23 11:05:15
1451
原创 时间序列分解法
影响时间序列变化的因素通常由长期趋势，季节变动，周期变动，不规则变动几部分组成TtStCtItYtfTtStCtItYtTtStCtItYtTt×St×Ct×It。
2023-02-19 17:19:28
2162
原创 时间序列分析——平滑法
平滑法是进行趋势分析和预测时常用的一种方法，利用修匀技术削弱短期随机波动对序列的影响，使序列平滑化，从而显示出变化的规律。根据平滑技术的不同，平滑法可分为移动平均法和指数平滑法。
2023-02-19 16:00:02
1731
原创 图的基本概念
图G由节点集合V=V(G)和边集合E=E(G)组成，其中V为非空有限集合。集合V中的节点（node）用红色标出，通过集合E中黑色的边（edge）连接。完全二分图 ：若V的每个顶点与U的每个顶点都关联，称为完全二分图补图：一个图G的补图Gˉ\bar{G}Gˉ也是以V(G)为顶点集的一个图，但是两个顶点在Gˉ\bar{G}Gˉ中邻接当且仅当它们在G中不邻接。下图b为a的补图。是完全图去除G的边集后得到的图。子图：所有顶点和边都属于图G的图称为G的子图生成子图：含有G的所有顶点的子图称为G的
2023-02-15 17:19:56
1330
原创 知识图谱表示
知识图谱的向量表示：将知识图谱中包括实体和关系的内容映射到连续向量空间方法的研究领域。（也叫做知识图谱嵌入、知识图谱的表示学习、知识表示学习）知识图谱嵌入方法的训练需要基于监督学习。在训练过程中可以学习到语义层信息。
2023-02-14 17:31:22
1319
原创 多分类问题
针对多类问题的分类中，具体讲有两种，即multiclass classification和multilabel classification。multiclass是指分类任务中包含不止一个类别时，每条数据仅仅对应其中一个类别，不会对应多个类别。multilabel是指分类任务中不止一个分类时，每条数据可能对应不止一个类别标签，例如一条新闻，可以被划分到多个板块。
2023-02-09 11:48:16
639
1
原创 python判断3维空间中两线段是否相交--空间关系判断
- 判断这条线段与选中线段是否共面 - 若两线段共面 判断两线段是否满足快速排斥实验 - 若两线段满足快速排斥实验 判断两条线段是否满足跨立实验 - 若满足跨立实验 则认为两条线段相交
2023-02-03 16:21:37
670
原创 CSDN写博客时的公式编辑-CSDN公式编辑
很久没有在CSDN上编辑文字了。想打一些公式却不记得了如何进行编辑。好在浏览器收藏夹里收藏着：公式编辑：http://ctex.math.org.cn/blackboard.html直接录入数学公式；键盘同时按下CTRL+SHIFT+L复制LATEX源码到论坛发帖框；LATEX源码放在$之间;忘记了在哪里窥探到这个链接的分享，感谢这位大佬！...
2021-04-05 21:04:33
144
原创 r语言基础学习——数据对象
常用数据对象：1、向量2、矩阵3、列表4、数据框6、因子和表一、向量R语言最基本的数据类型是向量（vector）x <- c(1,5,2,4,5,7) # 创建一个向量添加或删除向量元素：x <- c(x[1:3],3,x[4:6]) # 在向量中添加一个元素3x# 结果[1] 1 5 2 3 3 4 5指定位置更改向量元素x[1] <- 9 # 将X向量中第1个元素赋值9x# 结果[1] 9 5 2 4 5 7在不合理的位置更改向量元素时x
2021-03-29 21:36:41
888
1
原创 听说今晚会有流星雨 可惜这里是阴天2020.08.12
也许是真的喜欢你吧，脑子里总是会闪现你的样子。几天前就听到新闻报道今天会有流星雨的时候，就一直想着你了。我们已经四年没有再见了。希望能够各自安好，微博里面抒发感情看到的人太多了 就在这里偶尔感慨一下吧。...
2020-08-12 22:38:35
115
原创 python中的统计模型库——statsmodels
起因在熟悉了使用python进行数据的预处理之后，总想着将在大学时候通常基于R软件的统计模型直接在python中调用。有时两种语言风格切换会使编码过程不是很习惯。statsmodels就是这样一个库，里面囊括着常用的一些统计模型：前瞻一、回归和线性模型线性回归广义线性模型广义估计方程广义加性模型（GAM）稳健的线性模型线性混合效应模型离散因变量的回归广义线性混合效应模型方差分析二、时间序列分析时间序列分析 tsa通过状态空间方法进行时间序列分析 statespace向量自回
2020-05-11 15:08:48
4620
2
原创 python数据可视化——处理时间序列数据
在这里主要使用pandas对数据进行处理。首先把数据读入pandasdata = pd.read_csv("D:\\...存放数据的路径..\\数据文件名.csv", encoding="gbk")对于时间数据的那一列，将其转换为DATE类型data['TIME'] = pd.to_datetime(data['TIME'])如果对于时间数据，想单独提取某一月份或者某一日期或者某一周...
2020-03-16 10:34:31
769
原创 NLP学习——TF-IDF算法
TF-IDF用以评估一个词在一篇文章中的重要程度（这个文章属于某个文集或语料库）主要思想：一个重要的词汇能够代表该篇文章主旨。词汇在本篇文章中出现的频率高并且在文集中出现的频率少，就认对于该文章他的重要性更高。词频(TF)表示：词汇在本篇文章中出现的频率逆文档频率(IDF)表示：词汇在整个文集中出现频率的倒数...
2020-03-13 10:29:22
211
原创 NLP学习——LSTM长短时记忆网络笔记
长短时记忆网络（Long Short-Term Memory，LSTM）不管是我们还是计算机都很难有过目不忘的记忆，当看到一篇长文时，通常只会几下长文中内句话所讲的核心，而一些不太起眼的词汇将会被忘掉。LSTM网络就是模仿人的这个特点，在计算机处理很多文字时有侧重点的记住具有重要意义的词汇，忘记一些作用不大的词汇。长短时记忆网络通过不断地调用同一个cell逐次处理时序信息，每阅读一个词汇x...
2020-03-11 14:52:56
432
1
原创 NLP学习——词袋模型 & 词向量模型
词袋模型 BOW（Bag of Word）将句子分词后，装进一个袋子里，不考虑其词法与语序，即每个词语都是独立的。然后对每个词进行编码，常见的有one-hot、TF-IDF、Huffman编码。词向量模型词向量模型是考虑词语位置关系的一种模型。通过大量语料的训练，将每一个编码后词语映射到高维度的向量当中，通过求余弦的方式，可以判断两个词语之间的关系现在常用word2vec构成词向量模型，...
2020-03-09 09:49:47
537
原创 NLP学习——词向量
词向量：是一种表示自然语言中单词的方法，把每个词都表示为一个N维空间内的点，即一个高维空间内的向量。通过这种做法，把自然语言计算转换为向量计算。有的时候词向量会写作：word2vec、word2vectors这里面的2并不是er，而是使用了英语读音的to。word to vectors 词转换为向量。分词对于人类的思维方式来说，人类喜欢将零零散散的词汇拼凑在一起形成一个语句或是一幅篇章。比如...
2020-03-08 13:15:10
1115
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人