自然语言处理
文章平均质量分 96
自然语言处理(Natural Language Processing, NLP)主要应用于机器翻译、舆情监测、自动摘要、观点提取、文本分类、问题回答、文本语义对比、语音识别、中文OCR等方面。本专栏致力于初学者学习NLP的相关知识,并且逐渐深入掌握语言模型。
半亩花海
开源节流,万物生长
展开
-
文本分类 | 基于朴素贝叶斯的文本分类方法
Hi,大家好啊!本文主要了解文本分类的内容,以《基于朴素贝叶斯的文本分类方法》这一项目作为示例展示文本分类的意义。原创 2023-10-13 10:06:59 · 2660 阅读 · 0 评论 -
文本信息抽取 | 基于 LSTM 的命名实体识别
Hi,大家好啊!本文主要了解文本信息抽取的内容,以《基于LSTM的命名实体识别》这一项目作为示例展示文本信息抽取的意义。原创 2023-10-13 10:46:14 · 1382 阅读 · 2 评论 -
词向量技术 | SkipGram词向量模型的训练以及词的余弦相似度计算
Hi,大家好啊!词向量是表示自然语言里单词的一种方法,词向量技术在自然语言处理中也有着举足轻重的作用,通过这种方法,实现把自然语言计算转换为向量计算。原创 2023-10-12 00:17:27 · 2606 阅读 · 0 评论 -
关键词提取 | 基于Textrank算法的两种关键词提取
TextRank 算法是一种基于谷歌的 PageRank 算法的用于文本的基于图的排序算法,通过把文本分割成若干组成单元(单词、句子)并建立图模型,利用投票机制对文本中的重要成分进行排序,常用于关键词提取和文本摘要。和 LDA、HMM 等模型不同, TextRank 不需要事先对多篇文档进行学习训练, 因其简洁有效而得到广泛应用。原创 2023-10-10 23:19:56 · 1755 阅读 · 1 评论 -
中文分词算法 | 基于词表的三种分词算法
Hi,大家好啊!最近在学习自然语言处理(NLP)的相关知识,加上这学期开了自然语言处理这门课,并且在飞桨AI Studio上初步学习并运行相关项目。让我们首先认识一下自然语言处理:它主要应用于机器翻译、舆情监测、自动摘要、观点提取、文本分类、问题回答、文本语义对比、语音识别、中文OCR等方面,其与最近很火的语言大模型以及ChatGPT等之类由很强的关联。本文主要介绍中文分词算法中的基于词表的分词算法。原创 2023-10-08 22:58:24 · 1593 阅读 · 1 评论 -
中文分词算法 | 基于统计模型的三种分词算法
Hi,大家好啊!上一篇博客主要介绍了关于词表中的分词算法的内容,继续基于中文分词算法,学习统计模型中的分词算法,进一步探索自然语言处理的独特魅力!原创 2023-10-10 12:22:58 · 1448 阅读 · 1 评论