大数据概论

				 **第 1 章 大数据概论**

一.大数据概念
大数据（Big Data）：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
大数据主要解决，海量数据的采集、存储和分析计算问题，最后与业务相结合进行分析。
数据存储单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、
BB、NB、DB。
1Byte = 8bit 1K = 1024Byte 1MB = 1024K
1G = 1024M 1T = 1024G 1P = 1024T

二.大数据特点（4V）
1、Volume（大量）
2、Velocity（高速）
3、Variety（多样）
4、Value（低价值密度）
特点为：海量，快速，多样性，总体价值高但价值密度并不高

三.大数据应用场景
1、推荐小视频
用户冷启动。用户茧房。用户调教。
2、电商站内广告推荐：电商广告精准营销
3、零售：新零售领域，分析用户消费习惯，为用户购买商品提供方便，从而提升商品销量。经典案例，纸尿布+啤酒。
4、物流仓储：顺丰物流，隔日达，交通预判快递及时送达
5、保险：风险预测，助力保险领域投保盈利。。
6、金融：多维度体现用户特征，帮助金融机构
推荐优质客户，防范风险。
7.行业精准营销，提升精细化定价能力与销售预测。

四.大数据部门组织结构

五.大数据就业方向
数据可视化
ETL开发
报表开发
数仓开发：离线开发，实时开发
大数据工程师
大数据开发工程师
大数据分析工程师