![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
并行
文章平均质量分 58
八月对半
Read the fucking source code
展开
-
并行作业1:MPI安装,及示例程序运行
运行MPI程序系统采用vm下ubuntu16.04一、MPI系统安装1.1 安装环境(1)操作系统:Ubuntu 16.04.4 (64位)。(2)g++ 版本:gcc version 5.4.01.2 安装包下载地址及安装包(1)下载地址:http://www.mpich.org/downloads/(2)安装包:mpich-3.2.1.tar.gz1.3安装与测试(1)将安...原创 2018-12-03 12:22:32 · 7158 阅读 · 0 评论 -
并行作业2:Ubuntu(16.04)下安装配置hadoop(2.7.3)
Ubuntu(16.04)下安装配置hadoop(2.7.3)系统采用vm下ubuntu16.04一、Java环境搭建(参考我的其它博客)二、安装ssh-server并实现免密码登录1、下载安装ssh-serversudo apt-get install openssh-server2、启动sshsudo /etc/init.d/ssh start3、设置免密码登录cd ~/...原创 2018-12-03 12:38:16 · 235 阅读 · 0 评论 -
并行作业3:在eclipse中开发MapReduce程序
在eclipse中开发MapReduce程序系统采用vm下ubuntu16.04一、eclipse安装(参考我的其它博客)二、eclipse配置1、下载hadoop-eclipse-plugin-2.7.3.jar插件,并将其拖到虚拟机桌面2、将其移动到/usr/local/java/ide/eclipse/plugins目录下cd ~/桌面sudo mv hadoop-eclips...原创 2018-12-03 12:58:09 · 641 阅读 · 1 评论 -
并行作业4:莎士比亚文集倒排索引算法
莎士比亚文集倒排索引算法系统采用vm下ubuntu16.04一、 数据准备(hadoop安装可以参考我前面的博客)1、下载莎士比亚文集,下载地址如下:http://labfile.oss.aliyuncs.com/courses/456/shakespear.zip2、将其拖入Linux虚拟机,然后在eclipse中,上传到hdfs。DFS Locations |--hado...原创 2018-12-03 13:06:56 · 1077 阅读 · 0 评论 -
并行作业5:Wiki网页PageRank算法
莎士比亚文集倒排索引算法系统采用vm下ubuntu16.04一、 实验内容与要求在Eclipse环境下编写实现Wiki网页数据集的PageRank算法,列出前30个最高PageRank的网页信息输出列表。二、 实验数据在网上找数据的时候没有找到,从师兄那里获取了wiki_0.txt,文件大小约为30MB,该数据包含了维基网页自身的描述信息,如网页标题、ID以及它所指向的其他网页。将...原创 2018-12-03 13:16:52 · 1624 阅读 · 4 评论 -
并行作业6:hadoop实现K-Means算法(鸢尾花数据集)
K-Means算法系统采用vm下ubuntu16.04一、 实验内容与要求在Eclipse环境下编写实现K-means算法。二、 实验数据与目标1、实验数据来源于http://archive.ics.uci.edu/ml/machine-learning-databases/iris/iris.data。实验数据文件名为iris.txt(鸢尾花数据集),数据大小为4.6KB。数据...原创 2018-12-03 13:32:00 · 4442 阅读 · 6 评论