hadoop
NH4L
love
展开
-
Ubuntu18.04安装spark2.4.5
Ubuntu18.04安装spark下载压缩包配置spark运行并测试spark 系统:Ubuntu18.04 java-verison:1.8 hadoop-version:2.x.x spark-version:2.4.5 安装spark前必须安装hadoop并配置环境变量,若没进行按照或相关配置请查看:https://blog.csdn.net/LeeGe666/article/details/106050962 下载压缩包 网址输入: http://spark.apache.org/downlo原创 2020-05-11 19:34:53 · 622 阅读 · 2 评论 -
Ubuntu18.04安装hadoop2.x.x
Ubuntu18.04安装hadoop更新源安装openssh-server安装hadoop伪分布式配置查看hadoop运行情况 系统:Ubuntu18.04 java-verison:1.8 hadoop-version:2.x.x 安装hadoop前必须安装java并配置环境变量,若没进行按照或相关配置请查看:https://blog.csdn.net/LeeGe666/article/details/106050340 更新源 sudo apt-get update 镜像源我已经改成网易云的了原创 2020-05-11 12:42:04 · 860 阅读 · 1 评论 -
hadoop利用MapReduce进行排序(linux云服务器)
hadoop实现最基本的数字排序,并且是多文件的总排序。 配置: 系统:ubuntu 16.04 java : 1.8.0_191 hadoop: 1.2.1 实现的前提是配置好hadoop环境变量并启动。 终端输入: jps 如果出先下列进程则说明hadoop启动成功。 一、MapReduce 执行过程 二、排序算法讲解 import java.io.IOException; impo...原创 2019-04-21 14:45:28 · 608 阅读 · 0 评论