![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python爬虫
sdut_you
这个作者很懒,什么都没留下…
展开
-
python爬虫(三)获取腾讯直聘上的岗位信息并保存为从CSV格式
在以下页面,获取源代码,发现没有相关数据点击检查,发现相关数据根据headers相关内容,完成获取# 腾讯招聘import csvimport jsonimport requestsheaders = { 'user-agent': "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.212 Safari/537.36",}u原创 2021-08-13 21:25:17 · 507 阅读 · 0 评论 -
python爬虫(二)获取 Boss直聘上的岗位信息并保存到Excel表
# Boss直聘import requestsimport xlwtfrom lxml import etreebegin = int(input("输入起始页:"))end = int(input("输入终止页:"))url = "https://www.zhipin.com/c100010000/"base_url="https://www.zhipin.com"headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0;原创 2021-08-10 10:33:02 · 2844 阅读 · 18 评论 -
python爬虫(一) 根据所需搜索内容,爬取百度搜索页面
#baidu searchimport requestsurl='http://www.baidu.com/s'wd=input("请输入搜索内容:")begin=int(input("请输入起始页:"))end=int(input("请输入终止页:"))headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83原创 2021-08-10 10:05:08 · 1769 阅读 · 0 评论