爬虫
Mr.Zheng~_
想要的就去争取,等是等不到的~_
展开
-
scrapy的使用
scrapy 官方文档: https://docs.scrapy.org/en/latest/首先你要安装 scrapy安装方法很简单,打开cmd命令行:pip install --upgrade pip #先升级pippip install scrapy #下载scrapy解决 Scrapy 安装错误:Microsoft Visual C++ 14....原创 2019-01-05 14:32:41 · 601 阅读 · 0 评论 -
python爬虫 scrapy 爬取腾讯招聘
第一步创建项目:移步 https://blog.csdn.net/mgmgzm/article/details/85849918 查看项目创建方法第二步需求分析:1) 获取腾讯招聘搜索结果页2) 获取每一条结果对应的详情信息3) 二次解析页面第三步废话少说上代码:setting文件配置:# 打开请求头USER_AGENT = 'day9 (+http://w...原创 2019-01-05 15:03:03 · 1357 阅读 · 0 评论 -
python爬虫 selenium、PyQuery 爬取京东商城
首先来说一说selenium,这是一个浏览器自动化测试框架。嗯。。。。就介绍这么多,要详细了解的话自己去看文档诺~网址:https://www.seleniumhq.org/docs/第一步需求分析:1)自动搜索商品2)获取搜索结果的数据来个分割线第二步上代码啊:功能编写模块from selenium import webdriverfrom seleniu...原创 2019-01-15 09:39:16 · 920 阅读 · 0 评论