![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
自然语言处理
thyy8510386
这个作者很懒,什么都没留下…
展开
-
主题模型的应用场景和可视化
1、微博数据蕴含着很多实况信息,通过爬虫等技术手段采集后,对内容的主题进行数据分析,从而得到大众的关注热点。如图1为基于主题模型得到的台风“莫兰蒂”相关微博数据进行主题分类后的统计图。在图1中,我们可以看到通过LDA模型得到的不同类别的微博数据的走势,作者将微博数据分为了“预警信息”、“无关信息”、“灾情和实况信息”和“救援信息”四类。通过不同信息数据的时间序列,可以快速把握事件发生的趋势。配合...原创 2019-10-19 18:05:03 · 1700 阅读 · 1 评论 -
主题模型 LDA 困惑度计算 的一些应用
主题模型被广泛的应用于文本挖掘当中,很多人用该模型结合对应的领域做文本数据分析,在新闻传播、灾害信息科学、地理信息科学、社会媒体热点监测、推荐系统等方面均有所应用。主题模型本身的数据原理十分繁杂,需要拥有一定的数学知识储备才能将其进行较好的梳理,关于数学原理的介绍有一大堆,我写这篇博客的目的,不是为了介绍背后的数据原理,而是想带着大家把这个模型的应用起来。以上是我的初衷,所以下面我将介绍LDA...原创 2019-09-26 23:15:28 · 1308 阅读 · 0 评论