Linux Ubuntu 18.04实战安装大数据Hadoop 3.1.2版本 单节点模式

最新推荐文章于 2022-06-12 20:37:01 发布
最新推荐文章于 2022-06-12 20:37:01 发布
阅读量591 收藏 3
点赞数
分类专栏： 大数据 文章标签： 大数据 人工智能 机器学习 数据挖掘 数据分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/crhacq798/article/details/89020185
版权
本文详细介绍了如何在Linux Ubuntu 18.04系统上安装大数据框架Hadoop 3.1.2的单节点模式。内容涵盖安装JDK、SSH，从清华源下载Hadoop，配置环境变量，创建Hadoop用户，测试Hadoop运行及查看管理界面等步骤。
摘要由CSDN通过智能技术生成

Linux Ubuntu 18.04实战安装大数据Hadoop 3.1.2版本。这里分别选择最新的Ubuntu系统 18.04，以及最新的Hadoop版本3.1.2
Hadoop是开源免费的大数据方案，官方网站https://hadoop.apache.org/，核心的组件都是使用Java开发，也是目前也是最流行的，使用最广泛的大数据解决方案，包括几十个框架和工具。
hadoop有3种模式，我们先使用最简单的模式，来安装实战学习Hadoop。
1）单机模式Local (Standalone) Mode
2）伪分布式Pseudo-Distributed Mode
3）完全分布式Fully-Distributed Mode

想要在大数据这个领域汲取养分，让自己壮大成长。分享方向，行动以前先分享下一个大数据交流分享资源群 740041381 ，欢迎想学习，想转行的，进阶中你加入学习。

1、安装JDK
安装开源的JDK，免费，不会引起收费问题。

sudo apt install default-jdk

最低0.47元/天 解锁文章
数据工程师大牛
关注
专栏目录
大数据平台搭建（一） - Ubuntu 18.04中Hadoop组件的版本与安装顺序
Orange_Spotty_Cat的博客
03-15 1355
简介 目前在学习大数据的基础知识，希望能与机器学习与数据挖掘进行更好的融合。最近花费了一段时间，在自己的虚拟机中安装了Ubuntu 18.04并搭建了Hadoop伪分布式平台。在平台中安装了几个核心的组件。 这篇文章主要记录一下安装的版本与顺序，希望能给也需要安装的人提供一些建议。 后续会陆续将搭建的过程一步步写出来留作知识积累。 环境介绍 主机环境：Windows 10 虚拟软...
ubuntu18.04搭建完全分布式hadoop
04-02
使用vmware复制了三个ubuntu18.04虚拟机系统，模拟多台服务器，安装配置完全分布式hadoop。 想修改成免费的，不会修改。有问题可以留言一起交流
Hadoop大数据平台实战(00)：Linux Ubuntu 18.04实战安装大数据Hadoop 3.1.2版本 单节点模式 ...
weixin_33711647的博客
03-30 279
Linux Ubuntu 18.04实战安装大数据Hadoop 3.1.2版本。这里分别选择最新的Ubuntu系统 18.04，以及最新的Hadoop版本3.1.2Hadoop是开源免费的大数据方案，官方网站https://hadoop.apache.org/，核心的组件都是使用Java开发，也是目前也是最流行的，使用最广泛的大数据解决方案，包括几十个框...
ubuntu18.04搭建hadoop
m0_67392010的博客
04-11 445
1 安装ssh环境 首先进入root权限 su 关闭防火墙 systemctl stop firewalld.service 开机不启动防火墙 systemctl disable firewalld.service 查看防火墙状态 ufw status 配置root用户远程连接 如果没有安装ssh-server,先安装： apt-get install openssh-server 修改sshd_config gedit /etc/ssh/sshd_config 找到 # Authentica
大数据与Hadoop ubuntu18全分布式搭建
niyaozuozuihao的博客
10-16 212
大数据与Hadoop ubuntu18全分布式搭建
大数据Hadoop环境配置：Win10 VMware虚拟机 安装Ubuntu18.04 JDK Hadoop 伪分布式配置 wordcount实例运行
lzbmc的博客
07-05 2026
一、Win10 VMware虚拟机 安装Ubuntu18.04 详细步骤：https://blog.csdn.net/lzbmc/article/details/90757592 Tips: 安装了VMware Tools：可以在宿主机和虚拟机之间直接拷贝文件。 会弹出VMWareTools所在的文件夹，然后右键VMWare Tools.tar.gz，copy to到Home目录下。 ...
基于Hadoop（3.1.3）的数据仓库Hive（3.1.2）
weixin_43576422的博客
08-16 4947
环境 java 1.8 Ubuntu18.04 Hadoop 3.1.3 下载安装hive 下载之前我们要先看对应的版本，打开这个网址查看:http://hive.apache.org/downloads.html 由于我们之前安装的是Hadoop3.1.3所以这里我们可以下载3.1.2版本：清华镜像源hive 安装 sudo tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /usr/local/ #解压到/usr/local cd /usr/local/ sudo
从零搭建hive环境_ jdk 8 + SSH + hadoop 2.9.2 + hive 3.1.2
zhsworld的博客
02-04 526
目录 一、Ubuntu18.04 安装 jdk 8 二、安装SSH 三、安装hadoop 2.9.2 四、安装hive3.1.2 Windows 虚拟机安装 Ubuntu18.04 + Vim + Mysql5.7参照https://blog.csdn.net/zhsworld/article/details/103740953 一、Ubuntu18.04 安装 jdk 8 ...
（1）大数据全家桶安装说明文档_初次安装：Hadoop、hive、kafka、storm、flume、anaconda、mysql、redis、spark、zookeeper
果冻_Jump
11-25 228
说明 《大数据软件安装说明文档》包含两个部份： 初次安装 集群部署 该文档是第一章节《大数据软件安装说明文档_初次安装》 0，在/etc/hosts里面增加node1/node2/node3 {服务器_ip1} node1 {服务器_ip2} node2 {服务器_ip3} node3 1，开启SSH 安装 sudo apt-get update sudo apt-get install openssh-client sudo apt-get install openssh-se
大数据实战 Linux Ubuntu 20.04.1 hive数据仓库安装
qq_740785701的博客
11-30 869
1.hive2.3.6数据仓库安装
Linux（ubantu）下安装hadoop，安装过程超详细解析
adczsw的博客
10-21 3132
通过此文可以让你对Linux下软件安装和环境变量这些东西透彻理解。 Linux下安装jdk或者任意的包，有两种方式： 1：使用指令直接安装，例如：sudo apt install java-11-openjdk-amd64。 这种安装方式对环境变量直接就配置好了，安装结束后，java直接就是环境变量，在Linux下 任意目录下输入java都会显示成功。 2：先下载安装包，然后再配置环境变量；这种方法适用于在没有网络的情况下，平时同学给你一个安装包或者你有安装包，你...
在Linux中Ubuntu系统中安装Hadoop环境（超详细哦！） 02
m0_62533914的博客
06-12 299
crt ftp 工具的配置。
Hadoop3.1.1+Ubuntu18.04虚拟机三种部署方式
m0_37340681的博客
10-26 1182
一．安装虚拟机： 在3台电脑中或者3个虚拟机中安装Ubuntu系统，并测试三台电脑能互相ping通 二．安装Java： 1. 在3台Ubuntu电脑中安装Oracle Java 8 (由于Hadoop对高版本jdk支持不好，所以若jdk版本大于8，卸载后重新安装。卸载 指令： 移除所有 Java相关包 (Sun, Oracle, OpenJDK, IcedTea plugins, GI...
hadoop实战(二)ubuntu18.04搭建hadoop集群
钟晚语夕的专栏
11-05 1371
一、 安装JDK    官网下载jdk压缩包并解压， vim /etc/proflie 或者修改vi ~/.bashrc 加上如下： export JAVA_HOME=/home/hadoop/jdk1.8.0_161 export HADOOP_HOME=/home/hadoop/hadoop-2.9.1 export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_H...
ubuntu18.04 搭建hadoop完全分布式集群（Master、slave1、slave2）共三个节点
热门推荐
sxj的专栏
12-25 2万+
一、硬件配置以及操作系统： 所需要的机器以及操作系统：一台mac os笔记本、一台window笔记本（CPU双核四线程，内存8G），其中mac os用于远程操作，window笔记本装有虚拟机，虚拟出3个ubuntu18.04系统（配置CPU1个线程2个，内存1.5G，硬盘分配每个70G），对于mac os（可以用window机或者linux机）的配置没有要求 使用vm创建3个ubuntu18....
Ubuntu18.04下安装配置hadoop-3.1.2完全分布式集群（Hadoop之旅4）
你好，PurePeace！
07-26 1582
上一篇：Ubuntu18.04下配置java环境，jdk8（Hadoop之旅2） https://blog.csdn.net/qq_26373925/article/details/97413978 本文主要内容： 0.安装配置hadoop-3.1.2 集群规划： 三节点hadoop环境 （也就是三台 Ubuntu虚拟机，先配置好一台，之后再进行克隆） master装载软件： hadoop...
ubuntu16.04安装hadoop3.1.2-集群
朔语的博客
05-26 661
一、安装环境 hadoop版本：3.1.2 系统类型：ubuntu-server-16.04 3台 jdk版本：1.8 二、安装过程 1、系统配置（三台服务器都要配置） 查看或修改主机名 sudo vim /etc/hostname 修改网络映射 sudo vim /etc/hosts 192.168.1.121 ...
ubuntu安装hadoop（单节点）
linzheda的博客
04-01 1676
一丶安装jdk     说明：hadoop是使用java开发的所以必须安装jdk        安装步骤：   ubuntu安装jdk   二丶设置ssh无密码登录    说明：hadoop必须通过ssh与本地计算机以及其他主机连接，所以必须设置ssh    安装步骤：        1.安装ssh     sudo apt-get install ssh        2.安装rsync   s...
Ubuntu 18.04 安装 JDK、Hadoop、Hbase及图形界面教程
"Linux Ubuntu 18.04安装JDK、Hadoop、Hbase以及图形界面的详细步骤" 本文将详细介绍如何在Linux Ubuntu 18.04操作系统上安装Java JDK、Hadoop分布式文件系统、HBase分布式数据库，并设置图形化界面。以下是各个...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值