大数据从哪里来

爬虫和数据

一 为什么要做爬虫？

首先请问：都说现在是"大数据时代"，那数据从何而来？

1. 企业产生的用户数据:

   百度指数：http://index.baidu.com/
   阿里指数：https://alizs.taobao.com/
   TBI腾讯浏览指数：http://tbi.tencent.com/
   新浪微博指数：http://data.weibo.com/index

2. 数据平台购买数据：

   数据堂：http://www.datatang.com/about/about-us.html
   国云数据市场：http://www.moojnn.com/data-market/
   贵阳大数据交易所：http://trade.gbdex.com/trade.web/index.jsp

3. 政府/机构公开的数据：

   中华人民共和国国家统计局数据：http://data.stats.gov.cn/index.htm
   世界银行公开数据：http://data.worldbank.org.cn/
   联合国数据：http://data.un.org/
   纳斯达克：http://www.nasdaq.com/zh

4. 数据管理咨询公司：

   麦肯锡：http://www.mckinsey.com.cn/
   埃森哲：https://www.accenture.com/cn-zh/
   艾瑞咨询：http://www.iresearch.com.cn/