- 博客(8)
- 收藏
- 关注
RSS订阅原创 数据分析笔记—数据挖掘篇（五）
数据挖掘是从数据入手，分析数据，并数据中得到原本看不到的、隐藏的信息。对于数据分析师来说，数据挖掘也是必不可少的技能。数据挖掘涵盖了数学、统计学、计算机、物理学、人工智能等多学科知识，因此数据挖掘篇也会较长，共分为五个篇幅：统计学问题、特征工程、分类聚类问题、关联回归问题、算法评估指标。本文为第五篇，主要内容为。
2023-10-03 09:59:00
119
原创 数据分析笔记—数据挖掘篇（四）
关联问题就是已知某个事物，挖掘未知事物与已知事物在历史数据上的相关性，以判断事物间的关联。而关联分析，就是从大规模数据中，发现对象之间隐含关系与规律的过程。回归分析是一种统计学上分析数据的方法，目的在于了解两个或多个变数间是否相关、相关方向与强度，并建立数学模型以便观察特定变数来预测研究者感兴趣的变数。一元线性回归分析是回归分析的一种，用于研究一个自变量和一个因变量之间的关系。关联分析和回归分析是两种常见的数据分析方法，它们的目的和应用场景有所不同。关联分析是一种用于研究数据中变量之间关系的统计方法。
2023-09-17 15:37:45
476
原创 数据分析笔记—数据挖掘篇（三）
本篇主要针对的是类别问题，分为有监督的分类和无监督的聚类问题进行讨论，实际上类别问题的种类和方法要比文章内介绍的多得多，本文只是重点介绍了一些常见常用的知识点。除了离散型变量作为因变量，实际还会有连续型变量作为因变量的问题，而下一篇的关联回归，讨论的就是这类问题。
2023-09-10 16:06:13
282
原创 数据分析笔记—数据挖掘篇（二）
特征工程是数据挖掘中必不可少的一步，甚至被很多从业者认为是最重要的一步，数据挖掘的质量、效果、效率好坏，很大程度上取决于特征工程的好坏。特征工程完成后，就要开始对数据进行正式的挖掘了，后面三篇，将会对数据挖掘的几个基本问题和结果评价进行讨论。
2023-09-03 10:57:44
182
原创 数据分析笔记—数据挖掘篇（一）
假设检验，分拆开就是假设和检验。具体来说，就是会先提出一个假设，这个假设是真是假不确定，但是利用已有的数据来验证这个假设是否正确。我们所熟悉的p值、z值这些统计指标，实际上就是假设检验的判断标准。一般我们会先设置一个标准（如0.95的概率），当我们的数据超过这个标准时，可以认为我们的假设很大可能是不正确的，结合小概率事件不发生的原则，便认为拒绝了假设，而选择的假设的对立面，也就是备择假设。因果关系常常用来跟相关关系作比较，实际上在很久以前，相关关系还未提出时，就已经有了因果关系的思考。
2023-08-19 18:57:41
128
原创 数据分析笔记—数据分析篇（下）
小流量实验也称AB实验，一般是为了验证某一个产品能力或者策略的效果好坏，将产品的用户分成两部分，分别是实验组和对照组，对比两个组的用户表现而进行的实验。这里的分组并不一定是空间上的划分，也可能是时间上的划分。空间上的划分容易理解，就是随机取两组用户，一组施加策略，一组不加策略，分别观察两组的对比情况。时间上的划分有时也称为AA实验，即选择一组用户，观察用户在策略前和策略后的变化情况，进行对比，得到结论。实验，指的就是开展的策略，实际上并不能确定是百分比有效的，而开展的原因也就是为了验证策略是否有效。
2023-08-06 10:22:01
495
原创 数据分析笔记—数据分析篇（上）
指标预测，顾名思义就是对于指标情况未来走势的一个判断预估，这个预估很多时候不是简单说一个上升和下降的趋势就结束的，对于数据分析来说，需要给出上升下降趋势预测的同时，要预估指标数大概会来到什么样的区间范围，以及原因大概是什么，怎样去完成甚至超越（预测变好），或者避免这种趋势（预测变差）的产生。
2023-07-16 11:25:06
194
原创 数据分析笔记—数据仓库篇
数据仓库（Data Warehouse），可简写为DW或DWH，数仓等。它仅适用于，通常涉及大量的数据。数据仓库中的数据一般来自（数据埋点）和（实际发生的业务记录的数据）等广泛来源。
2023-06-26 22:05:53
1376
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人