Hadoop
Niclas_
这个作者很懒,什么都没留下…
展开
-
在Windows中安装Hadoop常见错误解决方法
本文的是在Windows10系统中运行的情况,其他版本的系统需自己尝试以下解决办法;Hadoop版本:hadoop-2.7.3Windows系统中Hadoop的具体配置方法在此就不赘述了,请自行查阅相关文档,下面直接开始上问题解决方法:错误一:Error: JAVA_HOME is incorrectly set. Please update D:\hadoop\ha...原创 2018-08-26 13:31:21 · 16125 阅读 · 15 评论 -
使用Shell脚本一键部署Hadoop
测试环境Linux系统版本:CentOS 7实现功能1、Java环境一键配置2、Hadoop单机版一键安装3、Hadoop伪分布式一键安装4、Hadoop集群部署5、伪分布式hadoop初始化6、集群设置SSH免密登录(使用hadoop用户操作)脚本说明部署Hadoop环境过程比较繁琐,还容易出错,写了一个Shell脚本用来一键部署,废话不多说,下面直接上代码。集群部署的...原创 2018-10-24 20:14:45 · 6596 阅读 · 0 评论 -
CentOS 7部署Hadoop集群(完全分布式)
目录测试环境集群服务器节点与进程集群部署规划搭建Linux系统配置Java环境安装单机版Hadoop配置环境变量关闭防火墙修改hosts文件配置SSH免密登录修改Hadoop配置文件HDFS初始化启动Hadoop查看服务器进程启动HDFS和YARN的web管理界面测试环境Linux系统版本:CentOS 7 64位Hadoop...原创 2018-10-04 16:49:42 · 1434 阅读 · 0 评论 -
CentOS 7部署Hadoop(伪分布式)
目录测试环境安装CentOS 7配置Java环境配置单机版Hadoop配置SSH免密登录修改Hadoop配置文件关闭防火墙HDFS初始化启动Hadoop关闭Hadoop测试环境Linux系统版本:CentOS 7 64位Hadoop版本:hadoop-2.7.3Java版本:jdk-8u181-linux-x64安装CentOS 7V...原创 2018-10-03 22:01:03 · 3082 阅读 · 0 评论 -
CentOS 7部署Hadoop(单机版)
目录测试环境Hadoop部署方式介绍安装CentOS 7配置Java环境Hadoop单机版安装Hadoop环境变量配置测试测试环境Linux系统版本:CentOS 7 64位Hadoop版本:hadoop-2.7.3Java版本:jdk-8u181-linux-x64Hadoop部署方式介绍Hadoop部署方式分三种:Standalone Mod...原创 2018-10-03 12:52:44 · 3381 阅读 · 2 评论 -
CentOS 7部署Hadoop集群(HA高可用集群)
目录测试环境Hadoop 组织框架HDFS架构YARN架构HA集群部署规划自动故障转移关于集群主机时间Linux环境搭建配置Java环境安装单机版HadoopZookeeper集群安装配置环境变量关闭防火墙修改hosts文件配置SSH免密登录修改Hadoop配置文件Hadoop集群的初始化Hadoop集群的启动测试环境...原创 2018-10-12 11:00:25 · 1747 阅读 · 0 评论 -
Linux系统下安装Java环境
目录测试环境下载JDK终端模拟软件安装前准备tar包的安装方法tar包的卸载rpm包的安装方法rpm包的卸载测试环境LInux系统版本:CentOS 7 64位终端模拟软件:Xshell 6Java版本:jdk-8u181-linux-x64下载JDK下载地址:https://www.oracle.com/technetwork/jav...原创 2018-10-02 18:11:24 · 162089 阅读 · 18 评论 -
在Windows中安装Hadoop(非虚拟机安装)
在Windows中安装Hadoop操作系统:Windows 10Hadoop版本:hadoop-2.7.3JDK版本:jdk-8u181-windows-x64.exe配置Java环境变量Hadoop底层实现语言是Java,所以我们在运行Hadoop时是需要Java运行环境的。下载好jdk之后按照提示安装,这里就不演示了,安装完成之后在DOS命令窗(运行cmd)输入:...原创 2018-10-01 11:54:05 · 8915 阅读 · 21 评论