全球的数据量正在以每18个月翻一倍的惊人速度增长,世界正在高速数字化,大数据堪比石油,如何掘金大数据是所有个人、企业和国家的机遇和挑战。中国是人才大国,能理解和应用大数据的创新人才更是稀缺资源。大数据分析应用已经渗透到我们生活的方方面面。
随着大数据在国内的发展,大数据相关人才却出现了供不应求的状况,大数据分析师更是被媒体称为“未来最具发展潜力的职业之一”。
大数据分析师
大数据分析师就是一群玩数据的人,玩出数据的商业价值,让数据变成生产力。
大数据和传统数据的最大区别在于,它是在线的、实时的、规模海量且形式不规整,无章法可循,因此“会玩”这些数据的人就很重要。
大数据领域三个大的技术方向
方向一:Hadoop大数据开发方向
方向二:数据挖掘、数据分析&机器学习方向
方向三:大数据运维&云计算方向
精通任何方向之一者,均会“前(钱)”途无量,而需要说明的是,三个方向中,数据挖掘、数据分析&机器学习是大数据催生新兴职业,数据分析师成IT界的“大熊猫”。
大数据分析师技能图谱
数据挖掘/数据分析/数据仓库/商业智能/大数据技术/人工智能/机器学习/深度学习/项目管理/系统架构
- 统计分析:大数定律、抽样推测规律、秩和检验、回归分析、方差分析等
- 可视化辅助工具:Excel、PPT、Xmind、Visio
- 大数据处理框架:Hadoop、Kaffka、Storm、ELK、Spark
- 数据库:SQLite、MySQL、MongonDB、Redis、Cassandra、HBase
- 数据仓库、商业智能:SSIS数据仓库、SSAS MDX多维数据集、Ssrs、DW2.0
- 数据碗蕨工具:Matlab、SAS、SPSS、R、Python
- 人工智能、机器学习
- 挖掘算法:数据结构、一致性、常用算法
- 编程语言:Python、R、Ruby、Java
自学掌握技能
阶段一:业务数据分析师
- 基础操作
1、数据录入
2、快速填充
3、数据格式
4、查找替换
5、冻结拆分
6、合并计算
7、排序筛选
8、分类汇总
9、公式填充
10、条件格式
11、插入表格
- 函数
1、函数书写
2、逻辑函数if and or
3、逻辑函数if嵌套
4、统计函数count系列函数
5、统计函数sum系列函数
6、统计函数average系列函数
7、查找函数vlookup精确查找与模糊查找
8、查找函数hlookup
9、查找函数match index lookup
10、引用函数及数学函数
11、日期函数
12、文本函数
13、信息函数
14、数组入门
- Excel制图
1、柱状图
2、饼图
3、折线图
4、雷达图
5、锥形图
6、散点图
7、地图
8、复合图
- 数据透视图表
1、数据透视表结构
2、数据透视表的步骤
3、数据透视表的项
4、父字段和子字段
5、分析选项卡
6、数据透视图
7、样式选项卡
- 数据库基础
1、数据库简介
2、DBMS和数据库的关系
3、MySQL简介
4、安装配置
5、环境变量的配置
6、Navicat管理工具
7、SQL语句的基本概念
8、SQL语句的分类
9、基本数据类型
- 字段属性
1、添加和删除主键
2、添加和删除外键
3、添加和删除唯一键
4、添加和删除自增
5、添加和删除默认值
<