hadoop
gyl2016
这个作者很懒,什么都没留下…
展开
-
服务器搭建hadoop集群
环境使用centos作为系统环境,基于原生 Hadoop 2,在Hadoop 2.7.x版本下验证通过,可适合任何 Hadoop 2.x.y 版本,例如 Hadoop 2.7.1,Hadoop 2.4.1 等。本教程简单的使用两个节点作为集群环境: 一个作为 Master 节点,局域网 IP 为 192.168.1.121;另一个作为 Slave 节点,局域网 IP 为 192.16...原创 2020-01-20 17:39:32 · 477 阅读 · 0 评论 -
手把手伪分布式hadoop环境搭建
准备文件:jdk-8u65-linux-x64.rpmCentOS-7-x86_64-DVD-1804.isoXshell-6.0.0101p.exeXftp-6.0.0095p.exeVirtualBox-6.0.4-128413-Win.exehadoop-2.7.3.tar.gz 下载地址:http://archive.apache.org/dist/hado...原创 2019-03-01 21:59:49 · 360 阅读 · 0 评论 -
ubuntu18.04首次配置hadoop伪分布式以及出现的问题
1、搞明白单机、伪分布式和集群的区别单机:也称非分布式,是直接读写本地操作系统的文件系统,一般仅用于本地MR程序的调试。直接解压hadoop包就行,无需配置。伪分布式:在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点: (NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode)。在“单节点集群”上运行Hadoo...原创 2019-09-28 23:57:02 · 629 阅读 · 1 评论