Hadoop
夏沐_lk
这个作者很懒,什么都没留下…
展开
-
Hadoop 环境配置与安装
本文主要讲述在VMware虚拟机上配置Hadoop的运行环境,包含配置过程与配置代码,具体如下: 一、环境配置: 1.安装jdk a)下载jdk-8u65-linux-x64.tar.gz b)tar开 $>su centos ; cd ~ $>mkdir downloads $>cp /mnt/hdfs/downloads/bigdata/jdk-8u65-linu...原创 2019-07-08 11:12:38 · 144 阅读 · 0 评论 -
Hadoop 配置eth0 提示Device does not seem to be present
故障现象: [root@c1node01 ~]# service network restart Shutting down loopback insterface:[ OK ] Bringing up loopback insterface: [ O...转载 2019-07-12 23:14:30 · 149 阅读 · 0 评论 -
Hadoop 开放端口方法
编辑/etc/sysconfig/iptables文件 (1)编辑/etc/sysconfig/iptables文件: vi /etc/sysconfig/iptables 加入内容并保存: -A INPUT -m state --state NEW -m tcp -p tcp --dport 9000 -j ACCEPT 其中:9000为端口 (2)...原创 2019-07-13 16:55:10 · 1463 阅读 · 0 评论 -
Hadoop CentOS 6.5关闭防火墙方法
关闭命令: service iptables stop 永久关闭防火墙: chkconfig iptables off 两个命令同时运行,运行完成后查看防火墙关闭状态 service iptables status 转自:https://www.cnblogs.com/justuntil/p/8057299.html 表示感谢!! ...转载 2019-07-13 17:04:23 · 1295 阅读 · 0 评论 -
Hadoop 生态圈介绍
1. hadoop 生态概况 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 具有可靠、高效、可伸缩的特点。 Hadoop的核心是YARN,HDFS和Mapreduce 下图是hadoop生态系统,集成spark生态圈。在未来一段时间内,hadoop将于spark共存,ha...转载 2019-07-14 13:12:58 · 167 阅读 · 0 评论 -
Hadoop 格式化HDFS报错java.net.UnknownHostException: centos64
异常描述 在对HDFS格式化,执行hadoop namenode -format命令时,出现未知的主机名的问题,异常信息如下所示: [shirdrn@localhost bin]$ hadoop namenode -format 11/06/22 07:33:31 INFO namenode.NameNode: STARTUP_MSG: /************************...转载 2019-07-12 15:31:22 · 526 阅读 · 0 评论