数据分析基础学习大纲

最新推荐文章于 2024-07-13 14:59:28 发布

程序媛小本

最新推荐文章于 2024-07-13 14:59:28 发布

阅读量590

点赞数 16

文章标签：数据分析学习数据挖掘

本文链接：https://blog.csdn.net/m0_59236127/article/details/137173373

版权

前言

本文主要包括数据分析基础学习大纲。

数据分析大纲

数据思维

什么是数据思维：

实现从数据到商业价值的转换的思维

什么是数据：

凡是可以被电子化记录的都是数据
随着科技的发展，昨天有很多东西不是数据，但是今天却变成非常重要的数据。
比如：图像和声音，以前没有办法记录
未来：可穿戴设备，物联网（车联网）

数据的价值：

业务核心诉求。收入，风险，成本
销售：数据分析给我提高销量
生产制造：数据分析帮我节约成本以及提高产品质量
HR：数据分析帮我降低员工流失率降低招聘用工成本

怎样培养数据思维：

深刻理解业务，从而把业务问题定义成数据可分析问题
确定业务目标——确定因变量——确定Y

概率论和统计

可以听有道（篇幅小但是内容精干）和考虫考研的概率统计课快速入门。考研要求的概率知识较多，统计知识相对于会少些。
入门后再根据自己情况深入学习统计学知识。

Python基础

1. Python语法基础
2. 学习科学计算工具：Numpy；数据分析工具：Pandas；图表绘制工具：Matplotlib；
3. Python难点参考书：《流畅的Python》、《Python Cookbook》

R语言基础

大家刚开始学习数据分析都有一个疑问，学习数据分析到底是学习Python还是R语言，SPSS，SAS等。
其实如果是学习Python方向的数据分析，当然要把Python学好。至于R语言，SPSS或者SAS能学习其中一个最好不过了，学习到掌握或者了解的地步即可。

学习R语言的好处：
1. R语言是免费的，有很多非常实用的数据分析库
2. 很多资深数据分析师是先会R语言后会Python的，学习R语言可以在工作中或者网上学习他们的数据分析思想
3. 工作中很有可能会遇到R语言
4. 不学习R语言会错过一本关于数据分析的好书——《R语言实战（第2版）》

学习R语言的方法：
1. 学习《R语言实战（第2版）》。学习这本书不仅可以学习到R语言，还能对数据分析有一个全面的认识。

数据库/数据仓库操作

数据分析工作需要经常和数据库打交道，需要熟练操作数据库。当企业数据量非常大时，会使用大数据（比如hadoop）进行数据分析，此时数据存储在hdfs中，hdfs是一个分布式文件系统，存储在hdfs中的数据可以用mapreduce方式进行数据分析，而数据仓库（比如Hive）是在hadoop框架上构建了一个将SQL语言转换为mapreduce的解释器，从而使数据分析师可以使用SQL在hdfs上进行数据分析。

数据库学习方法：
1. 学习《Mysql必知必会》

数据仓库的概念：
1. 非java编程者对hdfs的数据做mapreduce操作；将SQL转换为mapreduce，所以Hive也可以看作是SQL到mapreduce的解释器
2. 数据库存储的是在线数据，数据仓库存储的是历史数据
3. 数据库给业务系统提供数据存储的支撑；数据仓库存储的数据是为了数据分析和数据挖

数据仓库的学习方法：
1. 学习Hive的常用操作
2. 下图是Hive的架构，可以看到Hive可以通过CLI（SQL语言）、JDBC（数据库编程）以及图形化界面来进行操作。