自然语言处理相关list

最新推荐文章于 2022-07-21 16:40:12 发布
置顶 最新推荐文章于 2022-07-21 16:40:12 发布
阅读量402 收藏
点赞数
分类专栏： 自然语言处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cymy001/article/details/78857959
版权

NLP框架

词向量

词表(0/1)
词频
tf-idf(词的全局重要度)
Ngram(相邻词顺序)
NNLM(近义词 上下文) Word2vec
ELMo(多义词)

词袋模型

词向量训练

fastText的基本原理及参数
fastText文本分类
word2vec-google code
TextCNN文本分类
DSSM文本相似度
Bert文本分类

模型

朴素贝叶斯
支持向量机
逻辑回归
CNN(短文本 打标签)
LSTM(长文本 下文)
双向LSTM(上下文)
Attention Model(关键词)
transformer(改进RNN里BPTT)
BERT(MASK语言模型)

thinker_1120
关注
专栏目录
文本分析基础知识
qq_23617681的博客
04-15 3358
文本分析是指： 从文本中抽取特征词进行量化以表示文本信息。 文本一般指文字。 它是自然语言处理的一个小分支，自然语言处理还包括语音识别（常见的）等。 目的： 先决条件：将无结构化的原始文本转化为结构化的，计算机可以识别和处理的信息。 优势特点：从而可以利用机器学习，分类聚类等算法，对文本进行分析处理。 关键环节：对文本进行抽象，建立数学模型，用来描述和代替文本。 应用场景：
NLP之文本分类
miner_zhu的博客
09-26 2万+
文本自动分类简称文本分类（text categorization），是模式识别与自然语言处理密切结合的研究课题。传统的文本分类是基于文本内容的，研究如何将文本自动划分成政治的、经济的、军事的、体育的、娱乐的等各种类型。 目录 文本表示 文本向量化 向量的相似性度量（similarity） 文本特征选择方法 特征权重计算方法 分类器设计 文本分类评测指标 文本分类是在预定义的分类体...
读完本文你就了解什么是文本分析
朝闻道
02-09 1万+
一、文本的作用 文本涉及两个主体，即文本生产者和文本消费者： 文本生产者: 生成文本的主体；传递生产者想表达的内容，可能也会潜在蕴含着生产者的一些特质属性 文本消费者: 阅读文本的主体；消费者阅读这段文本时，文本又对消费者认知活动产生影响。 在大数据的今天，通过互联网超文本链接，无数的个人、团体、公司、政府等不同组织形态的主体均深深嵌入到互联网世界，在网络世界中留下了大量的文本。社会、管理、经济、营销、金融等不同学科，均可以研究网络上海量的文本，扩宽的研究对象和研究领域。下面大部分内容是从政治学和经管
Python中文文本分析基础
巧克力布丁的博客
12-13 1万+
文章目录一. 中文文本分析相关库1. 中文分词jieba库(1). jieba库概述(2). jieba库安装(3). jieba分词原理(4). jieba库的使用说明1. 精确模式2. 全模式3. 搜索引擎模式(5). jieba库常用函数2. 词云绘制worldcloud库3. 社交关系网络networkx库二. 文本词频统计1. 文本词频统计问题分析2. 文本词频统计实例 一. 中文文本分析相关库 1. 中文分词jieba库 (1). jieba库概述 jieba是优秀的中文分词第三方库 (2).
数据分析学习总结笔记09：文本分析
weixin_41961559的博客
04-04 1万+
数据分析学习总结笔记09：文本分析1 文本分析1.1 文本分析概述1.2 结构/非结构化数据1.3 文本数据特点1.4 自然语言处理——NLP1.5 文本挖掘的应用2 文本分词2.1 英文分词——KNIME2.2 中文分词2.2.1 中文分词工具2.2.2 分词的方法 1 文本分析 1.1 文本分析概述 文本分析是指对文本的表示及其特征项的选取；文本分析是文本挖掘、信息检索的一个基本问题，它把从文...
第1章 自然语言处理简介
12-21
自然语言处理（Natural Language Processing, NLP）是计算机科学领域的一个重要分支，它涉及人工智能、语言学和计算机科学，旨在让计算机理解、解释和生成人类自然语言。在本章中，我们将对NLP进行初步介绍，并探讨...
自然语言处理及应用基础知识
05-30
### 自然语言处理及应用基础知识 #### 自然语言处理概览 自然语言处理（Natural Language Processing，简称NLP）是一门计算机科学领域的分支学科，它致力于实现人与计算机之间的有效沟通，通过各种算法和技术使...
南邮自然语言处理实验一
最新发布
07-10
### 南邮自然语言处理实验一知识点解析 #### 一、实验背景与目的 本次实验为南京邮电大学自然语言处理课程的一部分，旨在通过实践操作加深学生对自然语言处理技术的理解与应用。实验主要聚焦于两个核心任务：词典...
NLP，自然语言处理，消极积极态度敏感词汇表，txt
03-03
Available as ‘A list of positive and negative opinion words or sentiment words for English’ from http://www.cs.uic.edu/~liub/FBS/sentiment-analysis.html#datasets Source: http://www.cs.uic.edu/~liub...
NLP自然语言处理-机器学习和自然语言处理介绍（一）
皇儒的博客
07-21 6255
NLP爱好者
NLP:文本情感分析快速入门
热门推荐
u010899985的博客
08-03 4万+
最近由中国计算机学会（CCF）主办，雷锋网，香港中文大学（深圳）承办的2018全球人工智能与机器人峰会（CCF-GAIR）在深圳召开，由于博主主要做NLP方向，主要在做情感分析，文本生成方面，所以主要关注大会NLP方面的内容，其中给大家分享一个情感分析入门的文章。 国内做情感分析比较好的有： 哈工大秦兵老师，秦老师多年从事自然语言处理的研究，获得国内第一个关于文本情感分析方面的自然科学基金重点...
文本数据分析：文本挖掘还是自然语言处理？
Analyst128的博客
07-17 2万+
数据分析师Seth Grimes曾指出“80%的商业信息来自非结构化数据，主要是文本数据”，这一表述可能夸大了文本数据在商业数据中的占比，但是文本数据的蕴含的信息价值毋庸置疑。KDnuggets的编辑、机器学习研究者和数据科学家Matthew Mayo就在网站上写了一个有关文本数据分析的文章系列。本文是该系列的第一篇，主要讲述了文本...
用Golang写一个搜索引擎（0x05）--- 文本相关性排序
weixin_33877885的博客
04-18 186
上面我们已经说过了一些倒排索引的东西，并且也知道了如何来实现一个倒排索引完成检索功能，那么检索完了以后如何排序呢，这一篇简单的说一下倒排索引的文本相关性排序，因为排序实在是太复杂了，我们这里就说说文本的相关性排序，而且是最简单的TD-IDF排序，之后有机会可以再说说整个搜索的排序算法有些什么。 文本相关性排序 首先明白几个概念： Ter...
（一）NLP基础知识
Haward
05-24 2万+
1、NLTK 一种流行的自然语言处理库、自带语料库、具有分类，分词等很多功能，国外使用者居多，类似中文的jieba处理库 2、文本处理流程 3、分词 英文用NLTK，中文用jieba等，比较难处理时候，可能得借助正则表达式。 4、复杂的词形 处理数据的时候可能需要变化词形，分2中情况： 1）Inflection变化:不影响词性 walk⇒⇒\Rightarrow walking...
文本匹配：语义相关性
一梦南柯
08-19 1万+
语义相关性，比如搜索，查询词和文档如果关键字不一样，但两者是多词一义，则模型不理解语义，做语义上的匹配解决不了问题。在推荐中，商品可以由一个向量来刻画，用户也可以由一系列交互过的商品来表达，两者之间做一些语义上的匹配，能推荐出一些有新意的商品，增加推荐多样性。而传统的方法比如CF，CB等，无法学习得到这种用户和商品的相对间接的联系。 适用场景：阅读理解，QA，搜索，语义蕴含，推荐，广告等。  ...
文本相关
森林木的博客
04-06 370
最近两天涉及到订单文本的问题，英文的能取到，中文的取不到。   正常维护文本是可以选语言的（或者根据登录语言自动更改），比如： 但是有些进去的时候是默认了EN。比如 一般而言我们调用函数取文本都是时候语言码都是选当前登录语言，而系统无法维护中文文本，所以使用中文登录读取的时候是读不到的。 太久不做这些了，只知道用READ_TEXT去读取 一般而言，参数正的ID 和object都是
BM25算法
llw01的专栏
05-06 2845
1.       BM25算法 BM25是二元独立模型的扩展，其得分函数有很多形式，最普通的形式如下：   ∑    其中，k1,k2,K均为经验设置的参数，fi是词项在文档中的频率，qfi是词项在查询中的频率。 K1通常为1.2，k2通常为0-1000 K的形式较为复杂   K=   上式中，dl表示文档的长度，avdl表示文档的平均长度，b通常取0.75   2.  
面向消费者的自动文本分析(Automated Text Analysis for Consumer Research) 2017 JCR 论文阅读
qy20115549的博客
06-14 1606
文章简介 Humphreys A, Jen-Hui Wang R. Automated Text Analysis for Consumer Research[J]. Journal of Consumer Research, 2017. 来自于管理类顶刊 Journal of Consumer Research，2017年发表的。概述性文章，讲述文本分析的流程，需要注意的问题，以及在消费者研...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值