学习过程总结
Last_xuan1
这个作者很懒,什么都没留下…
展开
-
2019年总结
总结一下这一年学过的、做过的、需要反思的一些东西 1月 这个月解除了内心关于学习方向上的疑惑,大致看完了python基础,学会了最简单的爬虫 2月 强化爬虫技术,把爬虫的大部分方面都了解和实践了一遍,verify、proxy、selenium、模拟登录、图片验证码、scrapy框架 3月 整了一下 ip池、css反爬,后边学了 web 框架 Django,刚开始学django 的时候,别人告诉我这...原创 2019-12-31 17:11:34 · 262 阅读 · 0 评论 -
12天Python爬虫学习的总结和思考
爬取网页的过程 1.发送请求和获取相应 2.对获取的response进行想要的信息的提取 3.对信息进行存储 (1)发送请求和相应 基本的是requests库的使用 共有参数: headers headers以字典形式添加,有的网页需要多一点的头部信息才可以获得响应。可以人为的删除一些没必要的头部信息。 nb一点的用法,生成随机的头部信息用fake_useragent这个库,要pip instal...原创 2019-01-31 00:39:40 · 1289 阅读 · 0 评论