![](https://img-blog.csdnimg.cn/281d8a8aa63a4658850dad2b77307507.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
Python数据挖掘
文章平均质量分 94
主要记录大数据挖掘、大数据存储、模型算法等内容
hello world 999
日拱一卒无有尽,功不唐捐终到海,十年磨一剑,再见顶峰相见。
展开
-
【大数据实验】06:MapReduce操作
MapReduce操作OVERVIEWMapReduce操作实验环境一、WordCount单词计数1.实验内容2.实验原理3.实验步骤(1)启动Hadoop集群(2)准备数据文件(3)创建Map/Reduce项目(4)程序测试及运行二、MapReduce数据去重1.实验内容2.实验原理3.实验步骤(1) 启动Hadoop集群(2)准备数据文件(3)创建Map/Reduce项目(4)程序测试及运行三、MapReduce数据排序1.实验内容2.实验原理3.实验步骤(1) 启动Hadoop集群(2)准备数据文原创 2022-05-06 19:29:20 · 1494 阅读 · 0 评论 -
【大数据实验】03:HBase伪分布式部署
HBase伪分布式部署OVERVIEWHBase伪分布式部署实验环境1.HBase单机模式安装配置2.HBase伪分布式安装部署3.HBase Shell操作4.HBase Web UI管理(1)Master节点的Web管理(2)RegionServer节点的Web管理实验环境硬件:ubuntu 16.04软件:JDK-1.8、Hbase1.4、Hadoop-2.7、zookeeper3.4、idea-IC-191.7479.19数据存放路径:~/datasettar包路径:~/softwa原创 2022-04-25 09:12:49 · 3135 阅读 · 0 评论 -
【大数据实验】01:Hadoop3伪分布部署
Hadoop3环境搭建OVERVIEWHadoop3环境搭建Hadoop3环境搭建(本地模式)实验内容实验环境实验原理实验步骤1.安装JDK82.安装Hadoop33.在Hadoop3上执行MR程序Hadoop3环境搭建(伪分布模式)实验内容实验环境实验原理实验步骤1.安装JDK82.配置SSH免密登录3.安装Hadoop4.Hadoop伪分布式配置5.格式化文件系统6.在Hadoop3集群上执行MapReduce程序Hadoop3环境搭建(本地模式)实验内容在Linux中安装和配置JDK8实原创 2022-03-29 17:28:34 · 3745 阅读 · 2 评论 -
【MATLAB学习】01:矩阵相关
matlab笔记p1:矩阵相关目录matlab笔记p1:矩阵相关一、MATLAB基础知识1.matlab矩阵表示(1)普通矩阵的建立:case1:直接输入法建立矩阵case2:利用已有矩阵建立更大矩阵case3:利用实部、虚部矩阵构成复数矩阵case4:冒号表达式case5:linspace函数产生行向量(2)单元矩阵的建立:2.matlab矩阵元素的引用(1)通过下标引用矩阵元素:(2)通过序号引用矩阵元素:(3)矩阵元素下标与序号的相互转换:case1:矩阵下标转序号`sub2ind`case2:矩原创 2021-08-26 20:32:13 · 2015 阅读 · 0 评论 -
【MATLAB学习】02:MATLAB绘图
matlab笔记p2目录matlab笔记p2三、MATLAB绘图1.二维曲线(1)plot函数:case1:`plot(x)`case2:`plot(x,y)`,x、y为向量case3:`plot(x,y)`,x、y为向量和矩阵case4:`plot(x,y)`,x、y为矩阵case5:绘制不同长度的曲线(2)plot(x, y)函数的样式:(3)fplot函数:case1:fplot函数基本用法case2:输入双函数参数的用法2.绘制图形的辅助操作(1)图形添加标注:(2)坐标轴控制:(3)图形保留:原创 2021-08-26 20:35:02 · 5006 阅读 · 2 评论 -
智能优化及其相关算法
智能优化及相关算法一、优化问题:优化:是应用数学的一个分支,主要研究在特定情况下最大化或最小化某一特定函数。优化算法是在建立了数学模型之后不能求偏微分 or 不能通过求导的方式求得最小值时,采用一些优化算法能够解决问题。二、遗传算法遗传算法是模拟达尔文生物进化论的自然选择和遗传学机理的生物进化论过程的一种搜索(寻优)算法,在人工系统中实现特定目标的优化。实质是通过群体搜索技术,根据适者生存逐代进化最终得到最优解。遗传算法必须做以下操作:初始群体的产生、求每一个个体的适应度、根据适者生存选择原创 2021-09-13 21:50:21 · 2356 阅读 · 0 评论