爬虫使用规范

前言

在如今的大数据时代任何地方程序的运行以及人工智能的训练等都脱离不了大量数据的需求，而目前的大数据交易平台比如（贵阳大数据交易所）等，在多数时候无法满足我们数据需求时，或者购买数据的消费大于聘请爬虫工程师时企业就会聘请爬虫工程师开发爬虫程序爬取企业所需数据，接下来就来谈谈爬虫到底会不会入狱

目前现状

目前由于大数据时代的井喷式发展，数据的规模越来越庞大，我们对于大量数据的依赖也是必不可少的。大数据为各行各业提供数据支撑（电商，旅游，娱乐，社交网络等）这些数据为我们提供了大量便捷的服务，同时我们也变成为他们无偿贡献行踪以及个人信息的“贡献者”，网站或者app通过后台获取到了我们一些个人信息比如手机号，姓名，购物爱好，出行爱好，常去地点，娱乐爱好等，通过这些小小的数据可以分析出很多东西，画出消费者画像之类的东西，比如你在刷小视频时，购物时你会发现你所看得到大多数数据都是你经常浏览的&#x