- 博客(14)
- 收藏
- 关注
RSS订阅原创 大数据处理与开发课程设计——纽约出租车大数据分析
注：完整代码见此处一、设计目的综合应用所学的Hadoop/Spark/Storm/Mongdb等技术，设计并实现一个较为完整的小型大数据处理和分析系统。通过系统分析、系统设计、编程调试、撰写实验报告等环节，初步掌握大数据分析软件系统设计的方法和步骤，灵活运用Java高级编程等语言进行软件开发，提高分析问题和解决问题的能力。提高Java高级程序设计水平，培养必要的工程实践动手能力。理解 HDFS 文件系统的基本结构，理解 MapReduce 的工作原理，可以搭建 Hadoop 开发环境，并能进行相应
2021-06-15 23:07:56
21279
22
原创 kmeans结合Canopy算法的python实现
一. 实验目的及原理通过分析K-Means聚类算法的聚类原理，利用高级编程语言实现K-Means聚类算法，并通过对样本数据的聚类过程，加深对该聚类算法的理解与应用过程二. 数据的准备及预处理实验所用编程语言：python开发环境：PyCharm实验所用数据集：随机生成的100组横纵坐标取值范围在（0，100）的坐标点三．算法设计设计算法前的思考：k-means算法本身的逻辑和实现并不复杂，计算的复杂度较低，并且保持有较好的伸缩性，因此不仅适用于小数据集，也同样适用于大数据背景下的数据聚类分析
2020-12-03 11:51:22
4415
15
原创 Apriori算法的Java实现
一. 实验目的及原理掌握Apriori算法对于关联规则中频繁集的产生以及关联规则集合的产生过程根据算法描述编程实现算法，调试运行。并结合相关实验数据进行应用，得到分析结果二. 数据的准备及预处理编程语言：Java编程环境：Intellij idea数据准备：自己创建Apriori数据库，在里面创建shopping表，shopping表有两个属性：id和goods，其中goods表示每一份订单中具体购买的商品清单。例如id为1的订单数据[fish meat fruit]表示在一个购买过程中
2020-12-03 11:17:12
1973
原创 python实现高斯消元法求线性方程组的解
高斯消元法简介 数学上，高斯消元法（或译：高斯消去法），是线性代数规划中的一个算法，可用来为线性方程组求解。但其算法十分复杂，不常用于加减消元法，求出矩阵的秩，以及求出可逆方阵的逆矩阵。不过，如果有过百万条等式时，这个算法会十分省时。一些极大的方程组通常会用迭代法以及花式消元来解决。当用于一个矩阵时，高斯消元法会产生出一个“行梯阵式”。高斯消元法可以用在电脑中来解决数千条等式及未知数。亦有一些...
2020-04-17 22:29:33
9023
9
原创 hadoop 3.1.3命令行命令./bin/hdfs dfs -mkdir input出现No such file or directory的情况
今天在学习hadoop基本操作时输入创建文件的命令时遇到了这种情况后来尝试输入./bin/hdfs dfs -mkdir -p input成功！具体情况不太清楚，查询操作文档从介绍看-p只是一个可选参数，至于为什么会出问题也不太清楚。。。总之如果出现上述问题，试试加-p看看！...
2020-04-09 16:13:51
5991
3
原创 安装HBase 2.2.2遇到的“找不到或无法加载主类”的问题
前几天在安装Hbase2.2.2时，安装好后查看Hbase版本遇到了这样的问题具体的问题如下：hadoop@lhr13-G7-7588:/usr/local/hbase$ bin/hbase version/usr/local/hadoop/libexec/hadoop-functions.sh: 行 2360: HADOOP_ORG.APACHE.HADOOP.HBASE.UTIL.GET...
2020-03-22 13:21:06
10532
22
原创 力扣171题 Excel表列序号
一、题目描述给定一个Excel表格中的列名称，返回其相应的列序号。例如，A -> 1B -> 2C -> 3…Z -> 26AA -> 27AB -> 28二、示例输出示例 1:输入: “A”输出: 1示例 2:输入: “AB”输出: 28示例 3:输入: “ZY”输出: 701三、题目分析 这个题的思想核心是函数的映...
2019-12-16 19:05:37
186
原创 C语言通过递归方式实现约瑟夫环问题
约瑟夫环是算法的一个经典问题，题目大意是N个人围成一圈，从第一个开始报数，第M个将被杀掉，最后剩下一个，其余人都将被杀掉。在算法中可以用一个循环链表来模拟人围成的圈，链表的每一个节点的数据域分别存放这个节点的 id 以及密码（即每个人报的数），链表首先按照系统的初始密码进行遍历循环，找到第一个节点拿到其密码然后删除之，在通过拿到的密码进行下一次遍历循环，直到链表中只剩下最后一个节点。 ...
2019-09-29 17:00:43
1321
原创 2017.02.18
C语言网课第五周 循环结构程序设计循环语句1. while语句语法：while（表达式）{语句组；}表达式可以是任何合法地C语言表达形式，其计算结果用于判断语句组是否被执行语句组时需要重复执行语句的集合，也被称为循环体当语句组只有一组语句时可以省略花括号语句组中必须包含能改变表达式的值来使表达式的值最终变为假，否则循环永远不会停止2. do…while语句语法：do...
2019-02-20 00:07:08
110
原创 2019.02.17
C语言网课第三周 顺序结构程序设计一、c语句1. 五种语句表达式语句、函数调用语句、控制语句、复合语句、空语句1. 表达式语句：一般形式：表达式；2.函数调用语句：一般形式：函数名；3.控制语句：三类条件控制语句：1)条件判断：if语句、switch语句2)循环语句：do while语句、while语句、for语句3)转向语句：break语句、goto语句、continu...
2019-02-17 22:49:13
244
原创 2019.02.16
一、C语言网课第一周 C语言程序设计概述C语言简介计算机语言的发展阶段：机器语言、汇编语言、高级语言程序设计语言：采用计算机语言对程序进行编写，以使计算机解决问题的整个处理过程成为程序设计。C语言发展历程和趋势1967 BCPL语言1970 B语言1973 C语言1975 发展C语言1989 标准化C语言从语言特点语言简洁、结构清晰表达能力强高效率的编程性文件可移植性...
2019-02-16 17:30:15
104
原创 2018.01.19
一、 网课第三周：基本数据类型。整数型数据十进制常数二进制常数：0b八进制常数：0o十六进制常数：0xint()：将数据转化为整数浮点型数据十进制小数形式指数形式：如1.23E4float()：将数据化为小数形式字符型数据“”内即代表一个字符串字符串切片操作：字符串中的每一个元素都有其编号，由左到右依次为0，1，2……由右到左依次为-1，-2，-3……，可以借...
2019-01-21 21:05:28
133
原创 2018.01.18
一、网课第一周：python基本语法元素。电脑编程：编辑程序让电脑执行的过程就叫编程 很多软件都可以编程编译 ：利用编译程序从源语言编写的源程序产生目标程序的过程。解释程序的基本编写方法：IPOI：Input 输入，程序的输入P：Process 处理，程序的主要逻辑O：Output 输出，程序的输出计算机编程的意义：I：编程能够训练思维II：增进对用户行为、社会和文化的认识...
2019-01-20 13:33:03
113
原创 第一次搭建hexo博客复盘
一、安装node.js去官网安装node.js，下好安装包正常操作即可。打开cmd命令行，输入node -v和npm -v，出现下图证明成功。如果npm -v报错，很可能是没有一以管理员身份运行，电脑输入win+x选择管理员身份再次输入代码即可。二、安装git去官网安装git ，下好安装包正常操作。右键点桌面出现 Git GUL Here 和Git Bash Here 两行...
2019-01-05 16:10:26
170
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人