爬虫是一种模拟浏览器发送请求并接收响应的技术，常用于数据抓取。从12306抢票到网络投票，爬虫在各种场景中发挥作用。它可分为通用、聚焦、增量和深层网络爬虫。爬虫获取的数据可用于网页展示、数据分析及机器学习项目。遵循Robots协议，尊重网站抓取限制。
- 数据的来源：
- 去第三方的公司购买数据(比如企查查)
- 去免费的数据网站下载数据(比如国家统计局)
- 通过爬虫爬取数据
- 人工收集数据(比如问卷调查)
- 爬虫的概念： 模拟浏览器发送网络请求，接收请求响应
- 爬虫的用途: 12306抢票,网络投票等
- 爬虫的分类: 分为通用爬虫(搜索引擎、聚焦爬虫(12306抢票) 、增量式网络爬虫（Incremental Web Crawler）和深层网络爬虫
- 爬虫获取的数据的用途：
- 进行在网页或者是app上进行展示
- 进行数据分析或者是机器学习相关的项目
6.
最低0.47元/天 解锁文章
1443
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
