1.1 什么是大数据
主要解决:海量数据的存储和海量数据的分析计算问题
大数据中的存储单位:bit,byte,KB,MB,GB,TB,PB,EB,ZB
1byte = 8bit 1KB = 1024byte 1MB = 1024KB 1GB = 1024MB 1TB = 1024GB …
1.2 大数据特点
- Volume(大量):数据量庞大
- Velocity(高速):比如淘宝双十一
- Variety(多样):数据库和文本为主的结构化数据,非结构化数据越来越多(mp4,音频,视频,图片,地理位置等信息)
- Value(低价值密度):大量数据其实有用的就那么一两条
1.3 大数据应用场景
- 物流仓储
- 零售
- 旅游
- 商品广告
- 保险
- 金融
- 房产
- 人工智能
1.4 发展前景
- 国家层面大力支持
- 人才缺口大
- 本科已经设立大数据专业
- 薪资高
1.5 大数据业务流程分析
- 产品人员提需求(统计总用户数、日活跃数、回流用户数、连续三天下单等等)
- 数据部门搭