Python做数据分析需要学什么？_数据分析师python 需要学习什么内容-CSDN博客

本文链接：https://blog.csdn.net/m0_60607895/article/details/138981397

在这里插入图片描述

感谢每一个认真阅读我文章的人，看着粉丝一路的上涨和关注，礼尚往来总是要有的：

①　2000多本Python电子书（主流和经典的书籍应该都有了）

②　Python标准库资料（最全中文版）

③　项目源码（四五十个有趣且经典的练手项目及源码）

④　Python基础入门、爬虫、web开发、大数据分析方面的视频（适合小白学习）

⑤ Python学习路线图（告别不入流的学习）

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化学习资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

一个完整的数据分析项目，大概可以分为这五个流程：数据获取——数据存储——数据清洗——数据分析——可视化分析，具体每部分都要掌握什么，下面给大家说清楚。

数据获取

数据获取是数据分析的第一步，关于一些内部数据大家可以找公司内部的人去要，其他外部数据如市场调研、竞品分析这些报告，大家可以在这些网站获取：

艾瑞网-数据报告：https://report.iresearch.cn/
易观分析-热门报告：https://www.analysys.cn/
友盟+数据报告：https://www.umeng.com/reports.html?from=hp
赛迪满天星行业报告：http://www.mtx.cn/#/
世界经济论坛报告：https://www.weforum.org/reports
普华永道行业报告：https://www.pwccn.com/zh/research-a

数据存储

企业常用的存储数据的数据库有哪些？不同数据库的存储区别又有哪些？下面跟我一起来了解常见数据库：

**Access数据库：**是一个关系型数据库管理系统；本地桌面型数据库，存储的数据量较少，是小型的数据库；查询语句为SQL。
**MYSQL数据库：**是一个关系型数据库管理系统；是开源的，总体拥有成本低；支持多种操作系统；
**SQL Server 数据库：**是一个关系型数据库管理系统；是非开源的；中型的数据库；
**Oracle数据库：**是一个关系型数据库管理系统；不是开源的；支持多种操作系统；
**Hive 数据库：**是非关系型数据库管理系统；数据规模大；主要进行离线的大数据分析；查询语句为HQL；

以上就是几种常见的数据库及介绍，方便大家在做数据分析的时候提取数据。

数据清洗

数据清洗是利用相关技术将“脏”数据转换为满足质量要求的数据。下面通过一张图描述数据清洗的原理。

从图中可以看出，同一值的不同表示、拼写错误、不同的命名习惯、不合法的值以及空值都会导致“脏”数据出现，通过定义好的数据清洗策略和清洗规则（即数理统计技术、数据挖掘技术等清洗策略）对“脏”数据进行清洗，得到满足数据质量要求的数据。

需要注意的是，数据清洗的目的是解决“脏”数据问题，即不是将“脏”数据洗掉，而是将“脏”数据洗干净。干净的数据指的是满足质量要求的数据。

数据分析与可视化分析

Python中常会用到一些专门的库，如NumPy、SciPy、Pandas和Matplotlib。数据处理常用到NumPy、SciPy和Pandas，数据分析常用到Pandas和Scikit-Learn，数据可视化常用到Matplotlib，而对大规模数据进行分布式挖掘时则可以使用Pyspark来调用Spark集群的资源。