![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python爬虫
苏绪
未来很远,脚踏实地,走好自己的每一步,有条不紊!失败没关系,不能放弃;失误可以有,但是要学会解决失误,避免失误
展开
-
Python爬虫入门开始(1)
爬虫的基本原理:学过Python的伙伴都应该知道Python用来写爬虫是件很简单很爽的事情。但是有些小伙伴不了解爬虫到底是什么,会纳闷为什么爬虫要设置什么请求头、请求体等等,到底如何去发送这个请求啊。当然有的小伙伴使用过很多爬虫的请求库,解析库,写过很多爬虫,但是可能他们的思路脉络也不是太清晰。后面会陆续学到其中原理。什么是爬虫?爬虫即网络爬虫,英文是Web Spider。翻译过来...原创 2019-05-15 14:40:36 · 359 阅读 · 0 评论 -
Python爬虫(3)
Requests库的操作。(可以用命令行直接进行敲也行的,或者用各种编译器)高级操作1.文件上传(导包)import requestsfiles = {'file' : open('logo.gif','rb')}resp = requests.post('http://httpbin.org/post', files=files)print(resp.text)文...原创 2019-05-15 14:54:18 · 236 阅读 · 0 评论 -
Python爬虫(2)
爬取具体的数据:(记得下载安装好 pycharm方便编译)爬取双瞳豆瓣影评:from lxml import etree;from urllib.request import urlopenurl = 'https://movie.douban.com/subject/1305046/comments'#测试request = urlopen(url);content = ...原创 2019-05-15 14:48:08 · 262 阅读 · 0 评论