浩哥前段时间给我布置了一个学习任务,学着用requests这个库,然鹅,我就看看,也还是不明白,一上来url、还有http八种请求类型就给我弄得很懵,学习主动性非常差。后来在浩哥的任务模式下开始磨蹭着写,最后在浩哥的大力拖拽之下终于完成了任务,也就有了这篇帖子。虽然是比较初级的爬虫,但是对我这样基础不好的文科生来说很多东西真的很难理解。希望借着这篇博客在自我梳理的同时,也给其他想要学习python的文科妹子一点希望。这里给大家贴一个requests的一个学习文档。
任务如题,但是不能直接粘贴图片的url,只用再python端输入关键词如:周杰伦,就再同一个文件夹中下载好对应的图片。
在这里先贴上整段代码,然后逐一说说我遇到的困难以及浩哥是怎么帮我解决的(希望下次可以自己长点脑子,自己来…)。
import requests
import re
keyword = "周杰伦"
s = requests.Session()
s.headers['User-Agent'] = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/34.0.1847.131 Safari/537.36'
kv={
'wd':keyword}
r=s.get("http://www.baidu.com/s",params=kv)
print(r.request.url)
url= r.request.url
r = s.get(url)
b =str( r.content.decode('utf-8')