老猿Python

☞ ░ 前往老猿Python博客 https://blog.csdn.net/LaoYuanPython ░一、专栏简介老猿在2019年就开放了免费的爬虫专栏，相关实战文章都是以爬取CSDN文章介绍，但2020年CSDN进行改版之后，相关实战文章实际已经失去了意义。因此在原有爬虫基础上，结合最新情况重新撰写爬虫专栏，并将进一步增加实战文章内容。该专栏介绍爬虫入门的基础知识，以及爬取CSDN文章信息、博主信息、给文章点赞、评论等实战内容。二、文章目录Python爬虫入门1：序章Python爬虫入门

本文介绍了用Python获取CSD博文2022版本的评论数据的更新方法。

本文介绍了使用Python搜索指定小说最新更新章节以及访问最快网站的实现思想和关键应用代码，实现自动搜索小说最新更新章节以及获取访问最快的网站。

本文介绍了爬虫应用中使用BeatifulSoap解析HTML报文的三个使用技巧，包括通过多属性组合查找或定位标签、通过结合多个标签关系来定位标签以及去除html报文中的代码标签来避免代码对解析的影响。

本文详细介绍了chrome80以上谷歌浏览器版本的加密数据解密方法、获取浏览器缓存本地文件中Cookie的方法及背景知识，并提供了获取浏览器中指定网站完整Cookie数据的实现代码，该代码获取的Cookie数据可以直接作为http请求头的Cookie值。

本文介绍了用Python搜索指定小说最新更新且网速最快网站的完整源码，供《Python爬虫入门》各位订阅亲们参考。

本文提供了一个读取Chrome80以上版本谷歌浏览器Cookie来给csdn指定博文点赞的案例。

前面已介绍了爬虫相关的基础知识，包括HTML基础知识、HTTP报文的捕获、模拟浏览器发起HTTP请求、HTTP报文解析等，并通过读取CSDN相关博客文章信息进行博文信息解析、博客信息解析、博文评论获取，以及对博文提交新评论和点赞等实战性内容，介绍了爬虫程序的基本实现步骤以及信息获取方法。本文通过最后一个综合性爬取CSDN指定博主所有博文的综合性实战案例，本文介绍了完整读取一CSDN博主所有博文的方法，并提供详细实现的备份博主博文的案例代码，是前面学习知识的一个综合运用，透彻理解本文的案例实现。

本文分析了给CSDN博文点赞的过程，包括请求的HTTP POST报文和应答报文，并根据相关报文过程给出了通过HTTP POST提交点赞请求并接收返回、分析返回结果的示例程序。通过该文的介绍，大家有助于理解http post带表单数据提交的实现过程。

本文详细介绍了CSDN博文评论区信息获取和提交新评论的HTTP请求和应答信息，并根据相关信息提供了Python代码提交请求、分析应答的示例函数，通过这些知识的介绍，有助于理解Python爬虫使用HTTP POST方法提交请求的方法。本文内容介绍仅供参考，使用爬虫程序在CSDN博文上提交评论的行为，有可能引起被评论博主的反感和投诉、也可能导致CSDN的处罚，请大家慎用。本文之所以介绍这些内容，是帮助大家掌握相关知识，而不是滥用相关机制，切记切记！！！！

本文结合CSDN博文的中关于博客的原创文章数、周排名、总排名、总阅读量、博客等级、积分、粉丝数、总获赞数、总评论、总收藏数以及按时间的发文情况的HTML报文信息，提供了爬取博文内容并分析这些信息的代码示例，有助于理解利用BeatifulSoap4结合多个标签分析爬取数据的HTML报文内容。

本文介绍了CSDN博文的文章标题、内容、博主名、阅读数量、收藏数量、点赞数量、评论数量、文章长度、是否原创、发表日期、是否付费专栏等基本信息的信息构成，并提供了爬取博文内容并分析这些信息的代码示例，有助于理解利用BeatifulSoap4分析爬取数据的HTML报文内容。

☞ ░ 老猿Python博文目录：https://blog.csdn.net/LaoYuanPython/article/details/98245036 ░一、引言有阵子博客的访问量出现了比较大的增长，从常规的1000-3000之间波动的范围一下子翻了将近一倍，粉丝增长从日均10-40人也增长了差不多一倍，下面是csdn提供的博文访问量数据图和粉丝增长数据图：突然增长的情况让人始料不及，老猿非常想弄清楚这些访问量和粉丝是什么文章带来的。但看了下不是最新发布博文，而以前的博文又不记得阅读量是否增

本节详细介绍了使用BeautifulSoup的select方法解析html报文的各种场景，并在介绍各种场景的基础上老猿将select支持的css选择器模式进行了归类总结，包括单个子选择器的组成方式以及多个子选择器两两之间的关系进行了分类。通过这些知识总结，就算对css选择器不熟悉的人也能熟练掌握BeautifulSoup的select解析方法。

本节介绍了BeautifulSoup查找类的主要方法，通过这些方法可以找到符合条件的html元素。本节文档老猿在BeautifulSoup官网的基础之上验证测试之后整理而成，文档结构大部分内容与官网内容，但有老猿验证之后的一些比较独特的内容。

本节介绍了BeautifulSoup对象的主要属性，通过这些属性可以访问特定标签和内容。

本节介绍了使用BeautifulSoup的安装、导入和创建对象的过程，并可以将对应html报文通过BeautifulSoup对象展示和格式化，并进行相关信息访问。后续章节将介绍相关数据的基本使用方法。

本节介绍了使用urllib包的request模块读取网页并支持解压的实现过程，以支持网页内容的压缩传输。

本节老猿介绍了利用浏览器获取的http请求头信息构造Python模拟浏览器访问请求头的过程，并提供了一个读取CSDN指定网页的案例。

本文基于IE11版本的开发者工具介绍http请求数据的获取和展现，当然浏览器的不同版本上述界面会有所差异，但总体应该差不多。有了浏览器开发工具捕获的这些信息，为后续应用模拟浏览器发起请求打下了基础。

本文介绍了谷歌浏览器开发者工具的开启方法、在开发者工具这查看http访问报文头信息的方法，通过这些介绍内容，我们就能获取到一次谷歌浏览器上网过程的关键信息，以供后续爬虫应用模拟谷歌浏览器发起http访问使用。通过Google浏览器，我们可以很方便的捕获浏览器访问网页的相关信息，并可以复制相关有用的信息如cookie供应用程序使用。

本节简单介绍了HTML语言的基础知识，如果大家有不理解的地方，可以再在网上多查查资料。这些知识对于爬虫程序解析网页内容非常重要，如果不理解基本概念，对网页解析的知识就不太好理解。

相关实战文章都是以爬取CSDN文章介绍，但2020年CSDN进行改版之后，相关实战文章实际已经失去了意义。因此在原有爬虫基础上，结合最新情况重新撰写爬虫专栏。该专栏将介绍爬虫入门的基础知识，以及爬取CSDN文章信息、博主信息、给文章点赞、评论等实战内容。