数据挖掘
架构师成长营
这个作者很懒,什么都没留下…
展开
-
Scapy 从入门到放弃
0x00 前言最近闲的没事,抽空了解下地表最强的嗅探和收发包的工具:scapy。scapy是一个python模块,使用简单,并且能灵活地构造各种数据包,是进行网络安全审计的好帮手。0x01 安装因为2020年python官方便不再支持python2,所以使用python3安装。0x02 构造数据包在构造数据包之前首先导入scapy模块: from scapy.all im...转载 2020-04-20 12:00:54 · 3426 阅读 · 2 评论 -
大数据架构与模式(三)理解大数据解决方案的架构层
摘要:大数据解决方案的逻辑层可以帮助定义和分类各个必要的组件,大数据解决方案需要使用这些组件来满足给定业务案例的功能性和非功能性需求。这些逻辑层列出了大数据解决方案的关键组件,包括从各种数据源获取数据的位置,以及向需要洞察的流程、设备和人员提供业务洞察所需的分析。概述这个 “大数据架构和模式” 系列的 第 2 部分 介绍了一种评估大数据解决方案可行性的基于维度的方法。如果您已经使用上一...转载 2019-04-02 12:06:28 · 424 阅读 · 0 评论 -
大数据挖掘方案
概述spark是实时大数据分析、挖掘的流行方案,hadoop是大数据存储和运行的流行方案,本demo主要表述用spark + hadoop如何做大数据挖掘的通用方案,包含了,包括了环境资源整合、spark和hadoop的整合,各部分模块的关系,并给出了可用的java 代码框架,和可运行的demo代码。详细代码下载:http://www.demodashi.com/demo/10153....转载 2019-04-02 12:51:29 · 354 阅读 · 0 评论 -
基于Hadoop架构的可视化大数据挖掘建模平台
大数据挖掘建模平台( 简称HB)是一套可定制的基于Hadoop架构的可视化数据挖掘建模平台,通过企业数据挖掘应用工具化的模式,使数据应用开发的速度更快,成本更低,让企业数据挖掘应用更简单。通过帮助中小企业挖掘各种市场活动和企业内部运作可能带来的收益,从而不断的发现新的收益增长点。 大数据挖掘应用主要包括三大模块: ETL数据整合模块、大数据挖掘模块和结果展现模块,其中大数据挖掘建模是整个应用的核心...转载 2019-04-02 14:27:13 · 4941 阅读 · 0 评论 -
一个资深数据人对数据挖掘解读
在银行做了两年的数据分析和挖掘工作,较少接触互联网的应用场景,因此,一直都在思考一个问题,“互联网和金融,在数据挖掘上,究竟存在什么样的区别”。在对这个问题的摸索和理解过程中,发现数据挖掘本身包含很多层次。并且模型本身也是存在传统和时髦之分的。本文就想聊聊这些话题。作者:来源:36大数据|2017-02-27 16:30收藏分享在银行做了两年的数据分析和挖掘工作,较少接触...转载 2019-04-02 14:35:48 · 252 阅读 · 0 评论 -
19款最好用的免费数据挖掘工具大汇总(干货)
数据在当今世界意味着金钱。随着向基于app的世界的过渡,数据呈指数增长。然而,大多数数据是非结构化的,因此需要一个过程和方法从数据中提取有用的信息,并将其转换为可理解的和可用的形式。数据挖掘或“数据库中的知识发现”是通过人工智能、机器学习、统计和数据库系统发现大数据集中的模式的过程。免费的数据挖掘工具包括从完整的模型开发环境如Knime和Orange,到各种用Java、c++编写的库,最常...转载 2019-04-02 14:44:20 · 6876 阅读 · 0 评论