爬虫入门（一）：爬虫简介

哈喽，大家好，我是小爬虫，从今天开始，我们进入一个全新的领域——Python爬虫。

什么是爬虫？爬虫能干什么？如何学习爬虫？这将是我们这个系列文章主要解决的几个问题。

什么是爬虫

爬虫，也称网络爬虫，又称网络机器人，可以按照我们所写的爬虫算法规则，自动化浏览、获取网络中的信息。而使用Python可以很方便地编写出爬虫程序，进行互联网信息的自动化检索。简单来说，我们使用浏览器获取的数据，也可以使用爬虫程序来获取到。

爬虫能做什么

举个例子，我们每天使用的百度、谷歌搜索引擎，其内容其实都是来自于爬虫。比如百度搜索引擎的爬虫叫做百度蜘蛛（Baiduspider），百度蜘蛛每天会在海量的互联网信息中进行爬取，爬取优质信息并收录，当用户在百度搜索引擎上检索对应关键词时，百度将对关键词进行分析处理，从收录的网页中找出相关网页，按照一定的排名规则进行排序并将结果展现给用户。

从个人来说，假如我们想要批量下载下面一共77页的高清大图壁纸，如果手工一个个去点击下载，非常浪费时间。又假如我们想要获取图2中将近2万页的全部数据用来做菜价的数据分析，该如何获取呢，总不能复制粘贴吧！

那么爬虫的作用就体现出来了，以上两个需求，如果使用爬虫来获取，只需要不到30行代码就可以写完，并且可以在几秒钟的时间获取完你想要的数据。

如何学习爬虫

那么爬虫这么厉害，我们该怎么学习呢？其实学习爬虫非常简单，从小爬的学习经历来说，比学习任何其他一门技术的成本都低，并且学习起来还非常有趣。比如学习其他技术很难找到实践的项目，学习起来非常枯燥，但是学习爬虫就不一样了，每学一个知识点，都可以马上到一个网站去实践，因此学习起来非常有成就感。

以下小爬列出了一个思维导图，只要大家跟着这个系列的文章来循序渐进的学习，很容易就能学完，并且自己可以去爬取各种网站的数据。

这个系列文章，如有Python编程基础的话学习效率会更高，如果没有也不需要担心，因为Python基础语法非常简单，并且Python爬虫所用到的Python基础知识也不多，我们会在文章中穿插着介绍基础，大家可以跟着小爬的文章一起来学习。

那么接下来，小爬将会不断更新，和大家一起来学习Python爬虫，敬请期待。记得关注小爬哦~

本文首发于公众号：小爬虫，欢迎关注