一、概念
1.什么是大数据
指无法在一定时间范围内用常规软件工具进行管理和处理的海量数据集合。
2.学习大数据是为了解决什么
解决海量数据的存储和对这些数据的分析计算问题,大数据技术就是要如何存储和如何分析的技术。
示例:100T的小电影怎么存储才快?分成100份并发存储在100个终端。如何快速查找分析?100个终端并发执行。
3.大数据特点
- volume大量:
G-->T-->P-->E-->Z,这些单位之间的都是1024来进级,从有人类以来,每个人说过的所有话的数据量大约就是5EB.BAT企业大数据量的量已经达到了EB级别,目前全球数据量达到35ZB。
- ·velocity高速:
对这些大量数据处理的高速性。天猫在双十一期间,仅3分钟的交易额都超过100亿。在春晚的清空购物车活动中,ali预估并发量应该是双十一的3倍,结果当晚服务器崩溃,因为实际访问量是双十一的15倍。
- va