![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫-python
YADA_NOYADA_NO
这个作者很懒,什么都没留下…
展开
-
爬虫学习之旅
最近打算好好学习爬虫,给自己定了几个小目标:爬取基本信息,以豆瓣为例,爬取豆瓣上排名前250位的电影名称;用scrapy制作爬虫,制作一个入门级爬虫;scrapy在爬取基本信息的同时,能爬取图片。 首先,开始今天的任务——爬取豆瓣网排名前500位的电影。爬取排名前250位的电影名称第一步,观察url 再点击第2页,截图如下: 仅仅在start的取值上有变化,可以发现其取值原创 2017-05-24 15:55:04 · 519 阅读 · 0 评论 -
分别用selenium和scrapy爬取网站(一)
用selenuim抓取“美食”网页信息一、下载安装selenuim、PhantomJS(Chrome),并配置环境。 二、利用selenium打开浏览器,设计爬取过程。from selenium import webdriverbrowser = webdriver.Chrome()运行上述程序,程序会自动调用chrome浏览器。打开淘宝首页,在搜索框中输入“美食“,并且点击原创 2017-06-14 21:33:09 · 3590 阅读 · 0 评论