爬虫项目（四）之京东评论

最新推荐文章于 2024-07-25 19:59:32 发布

艳学网

最新推荐文章于 2024-07-25 19:59:32 发布

阅读量449

点赞数

分类专栏： java工具文章标签：京东评论爬取京东评论京东评论爬虫京东爬虫爬虫

本文链接：https://blog.csdn.net/sinat_15153911/article/details/88387678

版权

java工具专栏收录该内容

65 篇文章 2 订阅

订阅专栏

爬虫项目（四）之京东评论

在这里插入图片描述
最近，出了小米9，听说可以拍月亮，好像挺酷的。就来JD看看网友们是怎么评论的。

经过爬取信息总结得到，小米还是挺不错的。

方法就是通过一个url链接获取评论信息字符串，然后转成json，然后分词，获取词频最多的关键词。

这样你可以收集电影影评，餐店点评等。

 JSONObject jsonObject =parseJSONP(html);

            JSONArray comments = jsonObject.getJSONArray("comments");
            for (int j = 0, k=comments.size(); j<k; j++){
                JSONObject jo = comments.getJSONObject(j);
                String content = jo.getString("content");
                //去除非中文
                String rex = "[^\\u4e00-\\u9fa5]";
                Pattern compile = Pattern.compile(rex);
                Matcher matcher = compile.matcher(content);

                content = matcher.replaceAll("");
                sb.append(content);
            }

爬虫不一定用框架，只要思路正确，怎么方便就怎么爬取。想学习的，下载源码如下：
http://47.98.237.162/detail/1/197