![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python爬虫
文章平均质量分 86
可爱丸学python
分享我的python自学之路。微信公众号:chimuyhs 【可爱丸学python】;会不定期在哔哩哔哩直播,欢迎观看,b站指路:https://space.bilibili.com/97194486
展开
-
小白也能学会的python爬虫通用公式,小姐姐带你轻松入门python爬虫!
hello大家好,我是你们的可爱丸,我们又见面啦。距离上次更新已经将近一年,说起来还怪不好意思的。为了表示歉意, 本期教程我自创了一个python爬虫的万能通用公式并分享给大家。 学会这个方法,每次只需要进行简单修改,你就能轻松获取到许多网站上的信息。那么话不多说,我们现在就开始学习吧。首先我们需要了解这个通用公式都有哪些步骤。其实,这个公式十分简单,只需要四个步骤,分别是:1、导入需要用到的库2、确定URL和请求头3、编写获取数据的函数4、调用函数接下来,我们逐个进行讲解。一、导入需要用.原创 2021-05-29 23:05:17 · 4561 阅读 · 31 评论 -
如何判断爬虫程序是否被反爬?python爬虫基础知识 | 网页状态码学习(小白必看)
hello大家好,我是你们的可爱丸,我们又见面啦!从今天开始我将会和大家分享一些有关python爬虫的基础知识,非常适合刚入门爬虫以及爬虫基础不是很好的朋友学习哦,希望大家能跟着我的教程,慢慢的将爬虫的基础打牢。那么今天就是我们python爬虫基础知识的第一节课,即:如何通过网页状态码来判断我们的请求是否成功、爬虫程序是否已被网站的反爬技术检查到?【视频教程】【图文教程】首先我们要知道,网页的状态码有很多,我们不可能把所有的网页状态码都记住,但是我们可以通过网页状态码的开头数字来简单判断它们是.原创 2020-06-25 19:44:43 · 6002 阅读 · 1 评论 -
爬虫数据云词图片怎么做?小姐姐教你用python做B站弹幕爬虫,并进行数据分析生成词云
hello大家好,我是你们的可爱丸,大家平时在B站看视频时有没有开弹幕的习惯呢?如果不把视频从头看到尾,那么多弹幕,我们怎么快速的知道大家都说了些什么并且持有什么观点呢?今天小姐姐就教你做一个简单的B站弹幕爬虫,让你在没有观看视频的情况下就能预先知道大家都在弹幕里面评论了什么,并且什么是大家说的最多的词语。话不多说,现在我们就开始学习B站弹幕的python爬虫吧!【效果预览】【详细教程...原创 2020-05-05 23:04:26 · 916 阅读 · 0 评论 -
18行代码搞定python爬虫:爬取58同城二手车信息并保存为Excel文件,python小白必看!
hello大家好,我是你们的可爱丸,今天我要和大家分享案例是一个只有18行代码的python爬虫。麻雀虽小五脏俱全,大家别看这个案例的代码数量少,但它却可以同时实现数据爬取和保存功能,现在你是不是迫不及待的想要学习了呢?那么接下来我就带着大家一起来详细学习吧!代码运行效果详细教程1、目标网页及网页数据查看方法我们今天要爬的网页是58同城的二手车信息页面,地址为:https:/...原创 2020-05-05 22:53:05 · 4938 阅读 · 3 评论 -
小说网站竟然没有下载功能?跟小姐姐学会这个python小说爬虫,把全文小说带回家!
hello大家好,我是你们的可爱丸,不知道你们有没有遇到过这种情况:自己喜欢的小说竟然只能看不能下载???作为一个python学习者,这种情况当然不能忍,那么今天我就教大家用python写一个小说爬虫,轻轻松松的把全网小说都下载到你的电脑里。视频教程地址:https://www.bilibili.com/video/bv1gQ4y1M7j7本次案例我选取的是小说网站是:笔趣阁,首...原创 2020-04-02 16:08:06 · 3925 阅读 · 1 评论 -
Requests基础学习(一)
一、Requests1、Requests库的简介request库是python的第三方库,它也是目前公认的爬取网页最好的第三方库,其特点是:简单、简洁,甚至用一行代码就能从网页上获取相关资源。2、requests库的安装方法按住windows+R键,在窗口中输入cmd,打开命令提示符pip install requests安装成功提示3、request使用的...原创 2019-02-21 19:57:45 · 701 阅读 · 0 评论