![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python爬数据
流年master
软件开发,C++,MFC,H5,js等
展开
-
python爬数据,天气预报 返回403
爬数据的时候,一般网站获取数据访问的动态js文件是可以直接访问的,用普通request = urllib.request.urlopen(url)res = request.read()就可以获取而有的不能直接获取,返回403报错,意思是访问不到,而这种明明有数据,服务器就是不给你返回数据的链接,可以使用加headers的方式,模拟网页环境headers = { 'A...原创 2019-01-10 14:07:20 · 3602 阅读 · 0 评论 -
python 字符转码
encode和decodepython中做字符转码时,通常要用unicode作为中间码encode是将Unicode转为其他码。如str1.encode('gb2312')decode是将其他码转为unicode,如str2.decode('gb2312')转码之前可以先自动获取字符的编码格式import chatdetcharset = chardet.de...原创 2019-01-10 14:09:51 · 4632 阅读 · 0 评论 -
python使用requests爬取数据(酷狗hot500案例)(讲解细致)
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/meiqi0538/article/details/79476300 关于使用requests爬取酷狗hot500的案例1. 案例环境:&n...转载 2018-12-11 15:08:50 · 3856 阅读 · 0 评论