python爬虫脚本入门-通过飞天茅台脚本讲些爬虫知识

前言

前段时间抢茅台脚本非常火，它是Python脚本，加上刚好最近在学习Python，我们准备通过这个脚本，来加深学习Python。

抢茅台的脚本其实属于爬虫脚本的一类，它实现了模拟登陆，模拟访问并抓取数据。于是我们从爬虫开始来学习Python做项目。从这篇开始记录下爬虫相关的笔记和知识点。

有兴趣也可以看下哔哩哔哩python-肉肉的视频

什么是爬虫

到底什么是爬虫？你可以理解为爬虫是互联网上的一只蜘蛛，如果遇到一些网络数据或资源，这只“蜘蛛”可以把这些数据和资源爬取下来。

官方地讲，爬虫是请求网站并提取数据的自动化程序。

使用茅台脚本来举例，脚本程序实现模拟登陆京东账号，保存登陆信息，也实现访问商品-茅台，并且帮你抢购商品，成功下订单等等。这类似于你打开京东网站登陆账号密码，浏览商品并下单的操作，脚本将这些操作都实现，形成一个自动化的程序。

爬虫分类

通用爬虫

通用网络爬虫是捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。
比如你发布的网站，需要给搜索引擎(百度)爬取过，才能在对应的搜索引擎(baidu)上搜索到。

聚焦爬虫

聚焦爬虫，是"面向特定主题需求"的一种网络爬虫程序，它与通用搜