各位同学们，好久没写原创技术文章了，最近有些忙，所以进度很慢，给大家道个歉。警告：本教程仅用作学习交流，请勿用作商业盈利，违者后果自负！如本文有侵犯任何组织集团公司的隐私或利益，请告知联系猪哥删除！！！一、淘宝登录复习前面我们已经介绍过了如何使用requests库登录淘宝，收到了很...

各位同学们，好久没写原创技术文章了，最近有些忙，所以进度很慢，给大家道个歉。> 警告：本教程仅用作学习交流，请勿用作商业盈利，违者后果自负！如本文有侵犯任何组织集团公司的隐私或利益，请告知联系猪哥删除！！！一、淘宝登录复习前面我们已经介绍过了如何使用requests库登录淘宝，收...

前段时间时间为大家讲解了如何使用requests库模拟登录淘宝，而今天我们将对该功能进行丰富。所以我们把之前的那个版本定为1.0，而今天修改的版本定为2.0。版本的地跌意味着功能的升级，那今天的2.0版本较之前的1.0版本有哪些改进呢？我们一起来看看！一、1.0版本实现步骤我们先来回顾一下...

昨天在朋友圈看到一个文章《30岁年薪20万算不算很失败》，最开头有一个介绍很打动我！而猪哥最近写了使用requests库登录淘宝还有查询四六级并生成打码截图，很多同学会感觉我们现在做的是小打小闹的事没什么用！我想说的是知识是永远学不完的，如何将自己学到的有限知识应用到生活工作中去，这...

昨天有很多同学在朋友圈秀六级成绩一个个都如(sang)此(jin)优(tian)秀(liang)当然也有悲催的哥们对于上面这位老弟我只能说：骚呢，兄弟这种事都能赶上，必须点赞一、需求分析在刷朋友圈的时候，看到很多同学截图不规整啊（没错，猪哥处女座），有些准考证号还没打马赛克，...

最近想爬取淘宝的一些商品，但是发现如果要使用搜索等一些功能时基本都需要登录，所以就想出一篇模拟登录淘宝的文章！看了下网上有很多关于模拟登录淘宝，但是基本都是使用scrapy、pyppeteer、selenium等库来模拟登录，但是目前我们还没有讲到这些库，只讲了requests库，那我们今...

昨天的朋友圈都在丧心病狂的秀恩爱，秀520红包！于是就有人出来普法教育。。。可是很多老铁连发红包的机会都没有。。。为什么这么多如此优秀的同学都还是单身呢？一、需求背景今天逛微博的时候发现一个有趣的话题#90后单身原因TOP3#> 七夕之际，一份针对全国90后青年婚恋观进行抽...

前段时间为“周杰伦打榜”话题迅速登上微博热搜榜因为cxk的粉丝们质疑周杰伦微博没有数据（周杰伦没有开通微博）于是，无数隐匿江湖多年看不下去的周杰伦老年粉开始被迫营业于是一场周杰伦中老年粉VS蔡徐坤铁军微博打榜大战拉响为听了那么多年的周杰伦粉丝们纷纷拉下老脸和00后的微博饭圈...

上一篇我们讲过Cookie相关的知识，了解到Cookie是为了交互式web而诞生的，它主要用于以下三个方面：会话状态管理（如用户登录状态、购物车、游戏分数或其它需要记录的信息）个性化设置（如用户自定义设置、主题等）浏览器行为跟踪（如跟踪分析用户行为等）我们今天就用requests库...

上一篇我们在讲优酷弹幕爬虫的时候，引入了一个新的知识点：Cookie，由于篇幅有限当时只是简单的给大家介绍了一下它的作用，今天我们就来全面了解一下Cookie（小饼干）以及相关的知识！相信很多同学肯定听过Cookie这个东西，也大概了解其作用，但是其原理以及如何设置，可能没有做过web的同学...

第一章主要讲解爬虫相关的知识如：http、网页、爬虫法律等，让大家对爬虫有了一个比较完善的了解和一些题外的知识点。今天这篇文章将是我们第二章的第一篇，我们从今天开始就正式进入实战阶段，后面将会有更多的实际案例。爬虫系列文章的第一篇，猪哥便为大家讲解了HTTP原理，很多人好奇：好好的讲爬虫...

六月分享主题：爬虫HTTP详解网页结构简介一文带你了解爬虫大家好，本期将为大家来采访一位爬虫工程师，与他相识是在一个技术号主群中，只有他怼了我的文章，所以也算不打不相识！他便是小周码字号主：Loco。文章主要分为三部分，第一部分为Loco自述：简单讲述一下他是如何从大学生一步一步走...

六月分享主题：爬虫HTTP详解网页结构简介前段时间我妈突然问我：儿子，爬虫是什么？我当时既惊讶又尴尬，惊讶的是为什么我妈会对爬虫好奇？尴尬的是我该怎么给她解释呢？一、爬虫介绍1.爬虫是什么网络爬虫(web crawler 简称爬虫)就是按照一定规则从互联网上抓取信息的程序，既然是程...

有人说“互联网中有50%以上的流量是爬虫”，第一次听这句话也许你会觉得这个说法实在太夸张了，怎么可能爬虫比用户还多呢？毕竟会爬虫的相对与不会爬虫的简直少之又少。但是很多爬虫工程师或者反爬虫工程师讲了实话：50%？你在逗我？就这么少的量？然后他举出例子：> 某个公司的某个页面的某个接口...

爬虫又称**网络爬虫**，所以在讲解爬虫之前，我们有必要了解一下什么是**网络**？网络是由若干节点和连接这些节点的链路构成，然后网络与网络之间所串连成的庞大网络叫做**互联网**，而我们今天要讲的**HTTP**（HyperText Transfer Protocol 超文本传输协议)是互联...

猪哥最早接触Python语言就是从爬虫开始的，因为当时公司需要开发一个这样的功能：解析用户收到的购票短信，然后分析短信提取有效信息，最后建立闹钟提醒用户。举个例子：小明买了两张晚上12点的电影票打算和女朋友一起去看电影。在收到购票短信后，我们会使用nlp分词分类，然后再匹配之前爬取到的近期所有...

在实际的工作中，不管你是开发、测试还是运维人员，都应该掌握的一项技能就是部署项目，简单说就是把项目放到服务器中，使其正常运行。今天猪哥就以咱们的微信机器人项目为例子，带大家来部署一下项目。本文将会详细介绍从服务器的选购、Python3.7的安装、使用Pycharm上传和启动项目这几个方面，让零...

微信（WeChat）是腾讯公司于2011年1月21日推出的一款社交软件，8年时间微信做到日活10亿，日消息量450亿。在此期间微信也推出了不少的功能如：“摇一摇”、“漂流瓶”、“朋友圈”、“附近的人”、“公众平台”、“小程序”等等，涵盖了我们生活的方方面面，微信正在慢慢践行着他们的口号：微信，...

随着微信社交的兴起，我们加入的群也越来越多，一个不经意就被拉入好几个群，群是大家协同交流的平台，但是微信群却越来越泛滥，不知道大家有没有统计过自己浪费在毫无营养的群中的时间？因为群质量或者群太吵的原因我们往往会将群设置为勿扰模式，而这样又有可能会错过一些自己比较关注的人说的话，比如女神、老...

微信，一个日活10亿的超级app，不仅在国内社交独领风骚，在国外社交也同样占有一席之地，今天我们要将便是如何用Python来生成一个微信机器人，突然想起鲁迅先生曾经说过的一句话：因为是微信机器人系列的第一篇文章，所以猪哥会特别详细的讲解每一地方，尽量使每一位想学习的同学都能顺顺利利的开始，...