胖虎

通过requests库，我们可以轻易的获取到网页的源代码。但是如果想更精细化的提取我们想要的内容，就需要对内容进行解析了。这个时候我们可以通过一个非常强大的工具来帮助我们 ---- 正则表达式正则表达式：通过制定一些特殊的字符或者字符组合来过滤字符串，提取或者检索目标的内容。正则匹配规则如下图所示，来源：CSDN在Python中，re模块拥有全部的正则表达式的功能。下面介绍几个Re中常用的几个方一、re.match从字符串的起始位置开始匹配，如果是起始位置匹配成功返回相应字符，如果不是起始

了解了爬虫和网络请求，下面就可以开始正式的了解Python中爬虫相关的模块了很多爬虫相关的书籍一般刚开始都会讲一下urllib模块，等你跟着书中的学完之后，会告诉你urllib模块用起来比较复杂，通常不使用确实，urllib是一个比较古老的模块，封装的爬虫方法也相对复杂。所以可以直接开始撸requests模块.Requests模块的作用就是模拟浏览器发送请求。是Python中原生的一款基于网络请求的模块，不仅功能强大，而且使用起来也比较简单！模块的安装直接通过pip进行安装即可pip inst

你要问程序员最喜欢的浏览器是什么？基本都会说当然是谷歌浏览器，它完全遵守了W3C的标准，是最最最受程序员欢迎的浏览器其次火狐浏览器，安全性高。可以作为备用浏览器。Edge是微软最新发布的浏览器，和谷歌浏览器内核一样。也是非常不错的那IE呢？ 对不起，打扰了！在进行爬虫时，不可避免的会用到浏览器的调试功能，需要去查看请求的地址、参数、响应，有时候还需要进行JS调试。下面呢就给大家介绍一下谷歌浏览器的调试技巧。谷歌浏览器中打开调试工具的快捷键是F12 或者 Ctrl + Shift + i。

一、爬虫简介爬虫是一个帮助我们去寻找网络上小姐姐的照片或视频并且下载到本地的技术Emmm… 似乎有点跑题了，百度百科上是这样解释爬虫的是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。通俗的来讲，爬虫就是客户端发送请求（浏览器、手机等等），接收服务器的响应，获取目标数据的过程。包括不限于图片、数据、音频、视频等。然后进行持久化的一个过程（数据进行存储）爬虫的应用在生活中息息相关，比如我们最常用的百度搜索、Google搜索；以及逢年过节用到的抢票软件；网购是用到的比价软件可以查到商品

这篇文章是之前在公众号写的登录https://music.163.com/ 网易云音乐搜索新说唱，打开Chrome的开发工具工具选择Network并重新加载页面，找到与评论数据相关的请求即name为web?csrf_token=的POST请求，如下图所示查看该请求的headers我们发现formData包含了两个参数：params、encSecKey。显然这两个参数是经过js加密的，这就是...

大家在使用微信过程中，有时候消息还没看到，就被撤回了。毕竟好奇心大家都有，明知到消息被撤回了，就更想去看一下是什么内容心里想着万一是女神给我表白了呢… 今天就用Python来做个微信防撤回的小功能。支持文本、图片、语音、视频、名片的防撤回。思路:利用itchat库将每次接收到的消息进行缓存。监听撤回事件，当有消失被撤回时，通过msgId去缓存中取到信息再发送给文件传输助手。这样就实现了...

本文首发于公众号 程序员共成长 公众号内回复 [礼包] 即可领取优质资源，包括但不限于Java、Python、Linux、数据库、大数据、架构、测试、前端、ui以及各方向电子书打开开发者工具-network，在用户评价页面我们发现浏览器有这样一个请求通过分析我们发现主要用的参数有三个productId，page，pageSize。后两个为分页参数，productId是每个商品的id，通...

QQ空间，这个曾经陪我们从童年到少年再到成年，从2G时代再到如今的4G末，占据了我们太多的青春回忆，如今好友空间动态更新的不在像从前那样频繁。依稀记得当年的好友买卖，抢车位再或者情侣空间，现在想想那时候真的很幼稚，那就是我们傻逼的童年，什么互踩，火星文，跑堂见证了我们无忧无虑的童年。有时候看看QQ推送的"那年今日"，看到自己好几年前发的动态，说的傻话，自己都怕了自己。有时候看到好朋友几年前的动态...