![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
一只特立独行的.喵
理想很美,很想实现
展开
-
Python爬虫爬取《哪吒之魔童降世》影评并分析
手机打开全部评论。 复制链接到电脑开发者选项打开。 评论是动态加载的,向下滑动找到影评json数据。 Python代码。 import pymongo import requests import json #获取数据库的主机名,端口名和数据库名 host = "主机名" port = 端口名 dbname = "Comments" #创建数据库的连接 client ...原创 2019-08-02 18:02:20 · 2979 阅读 · 4 评论 -
利用scrapy爬虫框架爬取书目信息
笔者是python3.6+pycharm的环境 爬取书目的网址是:http://books.toscrape.com 该网站是专门提供给爬虫初学者爬取的网站。 安装scrapy:任何系统都可以使用pip安装scrapy框架 >pip install scrapy #安装成功后查看版本信息 >scrapy version Scrapy 1.5.1 #笔者的scrapy版本是1.5....原创 2019-08-26 19:33:47 · 797 阅读 · 0 评论