基础爬虫（1）

---

前言

上一篇写的太简略了，想了想还是做一个系统有点的教程，这样可以让自己对爬虫的理解更加深入，也能让想学习爬虫的朋友能更好的理解。

---

一、爬虫介绍

根据使用场景，网络爬虫可分为 通用爬虫 和 聚焦爬虫 两种.
通用爬虫：通用网络爬虫 是 捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。
聚焦爬虫：聚焦爬虫，是"面向特定主题需求"的一种网络爬虫程序，它与通用搜索引擎爬虫的区别在于： 聚焦爬虫在实施网页抓取时会对内容进行处理筛选，尽量保证只抓取与需求相关的网页信息。
其实我们也可以通俗一点的理解爬虫。爬虫，顾名思义就是一个在各个网站上到处爬动的虫子，它的主要工作就是模拟人对浏览器网站的操作，查看网站上的各种数据，发现自己想要的就把它们吞下去并带回去给它的主人（就是你这个小可爱）。我们经常用的百度其实也是一种爬虫技术。

二、爬虫的价值

提到爬虫我们首先想到的就是它对数据的获取。随着大数据时代的发展，各种新的数据应用场景层出不穷，医疗、电商、金融、政务等越来越多领域都隐藏着大数据的身影。数据在各行各业的分析、预测以及各种商品的利润最大化中有着重要的意义，而数据的获取就需要依靠爬虫。
大到国企、华为、阿里这些大厂，小到一些电商平台、玩具生产厂商、房地产销售都需要数据的分析来支持它们做出下一步的判断，要获取数据当然也需要爬虫工程师。可以说爬虫就是一颗含金的螺丝钉，哪里都可以钉，又哪里都少不了。至于含金量嘛，

总结

看完这些相信你已经蠢蠢欲动了，欢迎关注评论，今天就到这了，接下来我会接着更新后面的技术部分。俗话说技多不压身，爬虫，你值得拥有。