非主流自然语言处理——遗忘算法系列（一）：算法概述

最新推荐文章于 2023-08-04 00:56:28 发布
最新推荐文章于 2023-08-04 00:56:28 发布
阅读量8k 收藏 8
点赞数 5
分类专栏： 遗忘算法 文章标签： 遗忘算法 牛顿冷却公式 自然语言处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/gzdmcaoyc/article/details/49992797
版权
本文介绍了一种以牛顿冷却公式为基础的遗忘算法，用于自然语言处理。该算法能发现和保留相对稳定周期性重现的事物，如词、词与词的关联。已实现的功能包括大规模语料词库生成、分词、词权值计算和共现词典生成，适用于各种语言和领域。
摘要由CSDN通过智能技术生成


一、前言


 　　这里“遗忘”不是笔误，这个系列要讲的“遗忘算法”，是以牛顿冷却公式模拟遗忘为基础、用于自然语言处理（NLP）的一类方法的统称，而不是大名鼎鼎的“遗传算法”！


　　在“遗忘”这条非主流自然语言处理路上，不知不觉已经摸索了三年有余，遗忘算法也算略成体系，虽然仍觉时机未到，还是决定先停一下，将脑中所积梳理成文，交由NLP的同好们点评交流。


　　曾与前总编刘江有过一面之缘，竟能围绕遗忘这个算法相谈甚欢，回想起来极是难得，本系列文章、基础算法源码、演示程序都将在CSDN首发，算是一些纪念吧。



二、遗忘算法原理


　　能够从未知的事物中发

最低0.47元/天 解锁文章
gzdmcaoyc
关注
专栏目录
【从零开始大模型开发与微调】AI 人工智能大语言模型 LLM：语言与思维——实践的融合
AI天才研究院
07-04 1786
在人工智能领域，大语言模型（Large Language Models, LLMs）已经取得了令人瞩目的成就。这些模型基于深度学习，通过在大量文本数据上预训练学习语言知识，被广泛应用于各种自然语言处理（NLP）任务，如图像描述、对话系统、翻译、摘要生成等。但这些模型的性能和表现，特别是其对语言和思维的理解，仍存在诸多困惑和疑问。大语言模型（LLMs）：指基于深度学习技术，通过在大量文本数据上预训练学习语言知识，能够理解和生成自然语言的大规模模型。自监督学习。
在线学习的深度强化学习——Online Reinforcement Learning for Learning
最新发布
AI天才研究院
09-01 2576
在人工智能和机器学习领域，深度强化学习（Deep Reinforcement Learning，DRL）已经成为一个备受关注的研究方向。传统的强化学习方法在处理高维状态空间和复杂决策问题时往往力不从心，而深度强化学习通过结合深度学习的强大表示能力，极大地扩展了强化学习的应用范围。然而，在实际应用中，我们常常面临着动态变化的环境和持续输入的数据流，这就要求学习算法能够实时地适应新的情况，不断调整和优化决策策略。在线学习（Online Learning）作为机器学习的一个重要分支，专门解决在。
遗忘算法：算法概述
虾米的博客
06-30 9090
一、遗忘算法原理 能够从未知的事物中发现关联、提炼规律才是真正智能的标志，而遗忘正是使用智能生物具备这一能力的工具，也是适应变化的利器，“遗忘”这一颇具负能量特征的家伙是如何实现发现这么个神奇魔法的呢？ 让我们从巴甫洛夫的狗说起：狗听到了铃声就知道开饭了。 铃声和开饭之间并不存在必然的联系，我们知道之所以狗会将两者联系在一起，是因为巴甫洛夫有意的将两者一次次在狗那儿重复出现。所以，重
非主流自然语言处理——遗忘算法系列（六）：语义模型
gzdmcaoyc的博客
04-11 1492
【前言】1、语义体系的建立对人工智能的意义，相信不用多说。2、公开此文的目的，是因为此文所设计的语义模型包含的待解决任务量很大，寻求同好共同讨论交流。3、版权说明   3.1、本文的版权归作者所有。   3.2、本文中所提及的问题的解决方案，归研究者所有。【正文】==============================【原理】词的语义可以通过与其相关联的词表征【定义】词的语义：用该词的词翼及其...
非主流自然语言处理——遗忘算法系列（三）：分词
gzdmcaoyc的博客
11-28 3826
前面介绍了词库的自动生成的方法，本文介绍如何利用前文所生成的词库进行分词。
遗忘算法介绍
03-10
大数据AI核心算法，算法的基础介绍，高清PPT介绍，仅供参考。
遗忘算法（词库生成&分词&词权重）演示程序（可直接运行）
03-21
遗忘算法（词库生成&分词&词权重）演示程序（可直接运行）
非主流自然语言处理——遗忘算法系列（二）：大规模语料词库生成
gzdmcaoyc的博客
11-23 6871
一、前言 　　写这篇文时，突然想到一个问题，大家的词库都是从哪来的？ 　　之所以会这么有些意外的问，是因为从没把词库当成个事儿：平时处理微博，就用程序跑一下微博语料获得微博词库；处理新闻，程序跑一下新闻语料获得新闻词库。甚至没有把跑出来的词库存下来的习惯，谁知道过两天是不是又出什么新词，与其用可能过时的，不如随手生成个新鲜出炉的。 　　好吧，我承认我这是在显摆。如果你也想和我一样，想要随用随丢，任性它一把，那随我来。
《自然语言处理-基于预训练模型的方法》笔记
github_34349558的博客
08-13 5352
《自然语言处理-基于预训练模型的方法》笔记 文章目录《自然语言处理-基于预训练模型的方法》笔记@[toc]〇.写在前面一、绪论(一) NLP 任务体系I.任务层级II.任务类别III.研究层次(二) 预训练的时代二、NLP 基础(一) 文本表示I.独热向量II.分布式表示III.词嵌入表示IV.词袋表示(二) NLP 任务I.语言模型II. 基础任务III. 应用任务(三) 基本问题I. 文本分类问题II. 结构预测问题III. 序列到序列问题(四) 评价指标I. 标准答案明确的情况II. 标准答案不明确的
强化学习 Qlearning 在机器学习中的应用——自动驾驶、预测股票价格和物流运输等
AI天才研究院
08-04 997
数据量和计算能力的增加带来了大规模数据分析的需求，而机器学习的发展为这一需求提供了更大的舞台。以更高效的方式训练模型也促进了算法和模型的进步。深度学习（DL）的崛起为深层神经网络的训练和应用提供了新的思路。Q-learning是一个强化学习算法，其核心思想是利用Q函数逼近最优策略，使智能体根据环境反馈的奖励和惩罚信号来进行自我学习，从而在一定程度上克服对历史数据的依赖，实现在多种复杂环境下不断探索的可能性。由于其强大的适应性和解决问题的鲁棒性，已经被广泛应用于各个领域，如游戏、控制等。
遗忘因子算法
01-14
遗忘因子算法是系统控制的方法之一，可以有效的控制系统，对学习matlab或simulink的学者很有用。
遗忘算法（词库生成、分词、词权重）演示程序.rar
11-27
遗忘算法演示程序及源码，功能包括词库生成、分词、词权重计算。是CSDN博文《非主流自然语言处理——遗忘算法系列》的配套资源。作者老憨欢迎交流讨论。
遗忘算法演示程序（包含词库生成、分词、词权重）C#源码详细介绍
05-13
遗忘算法演示程序（包含词库生成、分词、词权重）C#源码详细介绍
（转）艾宾浩斯遗忘曲线——记忆与复习
05-27
NULL 博文链接：https://mlxia.iteye.com/blog/607066
常遗忘的函数，f.reduce_sum,np.argsort ,np.concatenate，np.argmax，
weixin_38740463的博客
04-22 306
1) 其中，tf.reduce_sum用法如下： # 'x' is [[1, 1, 1] #[[1, 1, 1]] #求和 tf.reduce_sum(x) ==> 6 #按列求和 tf.reduce_sum(x, 0) ==> [2, 2, 2] #按行求和 tf.reduce_sum(x, 1) ==> [3, 3] #按照行的维度求和 ...
遗忘的cctype函数
只要学不死，就往死里学
03-08 250
/* * @Date: 2019-3-08 * @Author: tracycw * @Description: cctypeh函数 isalnum(c) 如果c是字母或数字，则为TRUE isalpha(c) 如果c是字母，返回TRUE iscntrl(c) 如果c是控制字符，返回...
参数辨识之递推算法、遗忘算法、变遗忘因子算法、变P算法
热门推荐
sy243772901的博客
05-29 1万+
第一次实验利用5组数据，根据LS算法得出 θ 和P，此第6组开始递推。 [u]=[xlsread('2019作业二时变系统.xlsx','B2:B401')]; [y]=[xlsread('2019作业二时变系统.xlsx','C2:C401')]; [ym]=[xlsread('2019作业二时变系统.xlsx','C2:C21')]; %计算初值所用的输出值ym [um]=[xlsre...
遗忘的常用语法或函数
qq_23159841的博客
11-08 224
// typeof 检测一个变量的类型 let obj = { test: 'ccc', test2: 2 } console.log(typeof obj.test); // string console.log(typeof obj.test2); // number let a = {} console.log(typeof a); // object
自然语言处理功能与SVM算法实现教程
资源摘要信息: "该压缩包文件名为‘NLP-function.zip’，主要面向自然语言处理（NLP）领域，提供了包括主题提取、高频词提取、情感分析和词向量在内的多项功能。同时，该文件还包含了逻辑回归和支持向量机这两种在...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值