数据挖掘的标准方法CRISP-DM

最新推荐文章于 2021-07-23 11:23:17 发布

明日江郎

最新推荐文章于 2021-07-23 11:23:17 发布

阅读量871

点赞数 1

分类专栏：机器智能文章标签：数据挖掘 KDD

本文链接：https://blog.csdn.net/qq_32254003/article/details/76034361

版权

机器智能专栏收录该内容

15 篇文章 0 订阅

订阅专栏

一.数据挖掘的起源

事实上，数据挖掘并不是近几年才出现的技术。只是近年来，随着传感器技术，和以RFID，NFC，3g，4g，WiFi，蓝牙，ZigBee等为代表的无线通讯技术的飞速发展，各行各业每分每秒都在源源不断产生着数据。几乎所有的人类行为，都可以在数据中找到或深或浅痕迹。因此，人们很自然的想到，通过数据了解自己，也通过数据了解对手，更通过数据了解环境和周围的人。兵法有云，"知己知彼，百战不殆。天时不如地利，地利不如人和"。而在当下，数据成了知己知彼知天知地知人的根据，而数据挖掘技术就是利器。随着大数据的逐渐崛起，数据挖掘的价值愈发凸显。它历经了以下几个具体的发展阶段。

第一阶段：电子邮件阶段

这个阶段可以认为是从70年代开始，平均的通讯量以每年几倍的速度增长。

第二阶段：信息发布阶段

从1995年起，以Web技术为代表的信息发布系统，爆炸式地成长起来，成为目前Internet的主要应用。中小企业如何把握好从“粗放型”到“精准型”营销时代的电子商务。

第三阶段： EC(ElectronicCommerce），即电子商务阶段

EC在美国也才刚刚开始，之所以把EC列为一个划时代的东西，是因为Internet的最终主要商业用途，就是电子商务。同时反过来也可以说，若干年后的商业信息，主要是通过Internet传递。Internet即将成为我们这个商业信息社会的神经系统。1997年底在加拿大温哥华举行的第五次亚太经合组织非正式首脑会议（APEC）上美国总统克林顿提出敦促各国共同促进电子商务发展的议案，其引起了全球首脑的关注，IBM、HP和Sun等国际著名的信息技术厂商已经宣布1998年为电子商务年。

第四阶段：全程电子商务阶段

随着SaaS（Software as a service）软件服务模式的出现，软件纷纷登陆互联网，延长了电子商务链条，形成了当下最新的“全程电子商务”概念模式。也因此形成了一门独立的学科——数据挖掘与客户关系管理硕士。

二.数据挖掘的标准方法

古人云"事无定法"，意思是说，做成一件事，没有固定的方法。这是鼓励人们创新，试着采用新的方法来做事。这样的尝试常常可以产生出更加有效快捷的方法。可既然是尝试，不走弯路是不可能的。所以如果你急需进行数据挖掘，我就不建议你自己去摸索尝试了。毕竟有前车之鉴，咱们干起来更快捷，更高效一些，等用熟练了"定法"，对它温故而知新，可能到达更高。

下面我们就来说一下"定法"–CRISP-DM。

CRISP-DM (cross-industry standard process for data mining),即为"跨行业数据挖掘标准流程"。此KDD过程模型于1999年欧盟机构联合起草。

它的流程如下图所示