物联网推动了大数据的进程
Dremel 1s1TB的数据
大数据的影响:事务理论
- 全样而非抽样
- 效率而非精确
- 相关而非因果
大数据的应用:
- 纸牌屋的火爆
- 谷歌流感预测
大数据关键技术
分布式存储,分布式处理
批处理
MapReduce批处理计算模式的典型代表
Spak实时性比上一个好,可高效迭代计算
流计算
S4
Storm
Flume
图计算
Google Pregel
查询分析计算
云计算的典型特征:
- 虚拟化
- 多用户
公有云 。私有云
laaS基础设施即服务
PaaS平台即服务,产品开发
SaaS软件即服务salesforce
需要虚拟化,面向所有用户:
数据中心: 耗能大。刀片服务器