【市场分析】如何从NLP的角度对用户需求进行分析（二）

前言 

        在上节中我们利用爬虫与分词模型简单统计了豆瓣小组中已养宠人群发言中的诉求，对其中各类产品的词频总和，词语总和以及平均词频进行了简要总结。但从仅有的数据来看，我们只能对用户市场需求进行简单的反映，无法具体深入到用户对产品的深度诉求和反馈，如何获取新维度的数据并衡量用户对单一产品的深度诉求成为用户需求分析的下一关键节点。

三、电商类平台：淘宝、京东

        电商类平台是宠物消费产品的一大分销渠道，在线上平台购买宠物产品也是很多青年养宠人群普遍的消费习惯。电商平台给与养宠人群分享产品使用体验的机会，也帮助生产企业更好的利用消费者评价优化迭代产品。因此我们选取某热门宠物智能净味器进行抓取分析：

1.评论数据采集

        由于京东、淘宝的反爬机制和页面结构（ORZ）本次抓取采用基于模拟抓取的Webs Scraper进行采集（具体操作流程在下一篇文章里详细展开）其中爬取的评价相关指标包括用户名、评价星级、评级内容、评价时间、是否为广告等，部分数据结构展示如下：

用户名	评价星级	评价内容	评价时间	点赞数
9***8	star5	给小蜜买的 本身窝里挺难闻的 放进去后 一打开箱子一股清新的味道 目前不错	2021/2/20  18:27:00	0
狐丶然然	star5	是有一定效果的。嗯，还不错。	2021-02-19 18:30	0
ChrisBoBo2	star5	除臭效果不错，一天一铲，加上除臭器，房间里终于没什么味道了，放在猫砂盆里刚刚好，粘的很牢固	2021-02-18 16:57	1
jd512690gdg	star5	不黑不吹 确实有效果	2021-02-16 20:39	0
w***8