![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
NH4L
love
展开
-
Ubuntu18.04安装spark2.4.5
Ubuntu18.04安装spark下载压缩包配置spark运行并测试spark系统:Ubuntu18.04java-verison:1.8hadoop-version:2.x.xspark-version:2.4.5安装spark前必须安装hadoop并配置环境变量,若没进行按照或相关配置请查看:https://blog.csdn.net/LeeGe666/article/details/106050962下载压缩包网址输入:http://spark.apache.org/downlo原创 2020-05-11 19:34:53 · 626 阅读 · 2 评论 -
Ubuntu18.04安装hadoop2.x.x
Ubuntu18.04安装hadoop更新源安装openssh-server安装hadoop伪分布式配置查看hadoop运行情况系统:Ubuntu18.04java-verison:1.8hadoop-version:2.x.x安装hadoop前必须安装java并配置环境变量,若没进行按照或相关配置请查看:https://blog.csdn.net/LeeGe666/article/details/106050340更新源sudo apt-get update镜像源我已经改成网易云的了原创 2020-05-11 12:42:04 · 863 阅读 · 1 评论 -
hadoop利用MapReduce进行排序(linux云服务器)
hadoop实现最基本的数字排序,并且是多文件的总排序。配置:系统:ubuntu 16.04java : 1.8.0_191hadoop: 1.2.1实现的前提是配置好hadoop环境变量并启动。终端输入:jps如果出先下列进程则说明hadoop启动成功。一、MapReduce 执行过程二、排序算法讲解import java.io.IOException;impo...原创 2019-04-21 14:45:28 · 611 阅读 · 0 评论