一起玩编程

一、本章介绍 前面介绍了玩转数据的前两部：可视化使用数据爬虫，可视化开发数据管理。 今天介绍玩转数据第三部——可视化数据展示 (1)数据爬虫解决的是数据来源问题，以便我们不需要人工整理收集或生产数据； (2)数据管理解决的是数据存储问题，让我们的数据能够被存储、编辑、检索； (3)数据展示解决的是数据统计问题，让我们对数据全局一目了然，帮助我们做出决策。 本章将介绍如何将爬虫爬取的数据导入数据管理系统然后基于这些数据快速生成报表实现数据展示。注意，可以跳过前两部直接学习第三部。 二、系统.

介绍 背景 互联网上有着无数的网页，包含着海量的信息。但很多时候，无论出于数据分析或产品需求，我们需要从某些网站，提取出我们感兴趣、有价值的内容，但是我们不可能去每一个网页去复制粘贴。所以我们需要一种能自动获取网页内容并可以按照指定规则提取相应内容的程序，这就是爬虫技术。 利用爬虫技术批量且自动化得获取和处理信息。对于整体情况可以多一个侧面去了解。比如获得本地某房产信息网上房屋交易价格信息、获得网上商城当前的爆款商品、获得各个机场的实时流量、获得热点城市的火车票情况、各种热门公司招聘中的职位数及月薪