1.观看学习了学堂在线《数据科学导论》
1.1了解了一些数据科学发展史:
中国已将大数据发展确定为国家战略。
1.2认识了一些基本概念:
(1)“数据”指的是以有组织(以行列结构存储)和无组织(通常指文本、原始音频/信号、图片等)格式聚集在一起的信息。
(2)机器学习中常用到概率模型统计模型。
(3)探索式数据分析(EDA):清洗和规整数据,并快速获得洞察。将无组织数据转换为有(4)组织数据,同时填充缺失值,修复错误数据点。
(5)数据挖掘:发现数据间的关系。
(6)大数据:体量巨大以至于单机难以处理。
1.3复习了数据科学相关的数学知识和统计学知识
微积分、线性代数、概率论等相关知识。
1.4重点学习了数据科学流程及数据科学技术
1.4.1数据科学流程
包括数据生产、数据处理、探索式数据分析(EDA)、数据分析与洞见、结果展现(最常用数据可视化方法)、提供数据产品等。
数据科学流程如下图所示: