大数据概述
大数据背景
- 大数据诞生于第三次信息化浪潮,以存储空间、计算速度、网络带宽的大幅度提升作为技术支撑,以大数据、云计算、物联网技术作为代表
- 信息化浪潮
信息化浪潮 | 发生时间 | 标志 | 解决问题 |
---|---|---|---|
第一次信息化浪潮 | 1980年前后 | 个人计算机 | 信息处理 |
第二次信息化浪潮 | 1995年前后 | 互联网 | 信息传输 |
第三次信息化浪潮 | 2010年前后 | 大数据、云计算、物联网 | 信息爆炸 |
大数据概念
4V理论
- VELOCITY(快速化):数据处理速度快,需要达到秒级决策
- VARIETY(多样化):数据的格式、来源不统一,样式各异
- VOLUME(大量化):数据量庞大
- VALUE(价值密度低):冗余数据、无用数据多
概念
大数据可以简单的理解成由结构化数据(存储于关系型数据库中的数据,占10%以下)和非结构化数据(文本、图像、视频、日志等,占90%以上)组成的数据集合
大数据影响
大数据颠覆传统思维方式</