hadoop2.5.0-cdh5.3.3 伪分布式安装(mysql、hive、sqoop)

这篇博客详细介绍了如何在CentOS 6.7上进行Hadoop 2.5.0-cdh5.3.3的伪分布式安装,包括配置静态IP、主机名,安装JDK1.7,以及安装和配置Hadoop、Hive和Sqoop。博主强调了在Hadoop环境配置中解决虚拟机重启后服务无法启动的问题,以及如何为Hive创建MySQL元数据库,并提供了连接MySQL数据库的配置示例。
摘要由CSDN通过智能技术生成

一、准备一台机器(我的是centos 6.7 64位)

-----------------------------------------------------------------------------------------------------------

主机名和ip地址映射:

[hadoop@hadoop ~]$ cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.38.100 hadoop

-----------------------------------------------------------------------------------------------------------

配置静态的ip:

[hadoop@hadoop ~]$ cat /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
HWADDR=00:0c:29:c3:70:cf
TYPE=Ethernet
UUID=707e0c2e-6550-4c50-a650-4b352f72c4b1
ONBOOT=yes
NM_CONTROLLED=yes
BOOTPROTO=none
IPADDR=192.168.38.100
NETMASK=255.255.255.0
IPV6INIT=no
USERCTL=no

---------------------------------------------------------------------------------------------------------------

修改主机名:

[hadoop@hadoop ~]$ cat /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoop

---------------------------------------------------------------------------------------------------------------

二、安装jdk1.7

--------------------------------------------------------------------------------------------------------------

上传tar包,创建目录:mkdir -p /usr/local/jdk7,解压到此目录,分组授权:

eg:

[hadoop@hadoop ~]$ ls -ltr /usr/local/

drwxrwxrwx. 3 hadoop hadoop 4096 Jan 19 11:13 hadoop
drwxrwxrwx. 3 hadoop hadoop 4096 Jan 19 11:14 jdk7
drwxrwxrwx. 3 hadoop hadoop 4096 Jan 19 11:15 hive
drwxrwxrwx. 3 hadoop hadoop 4096 Jan 19 11:16 sqoop

注释:

我在此处将以上四个包全部安装,并分用户组授权

--------------------------------------------------------------------------------------------------------------

配置jdk环境变量:

[hadoop@hadoop ~]$ cat /etc/profile

JAVA_HOME=/usr/local/jdk7/jdk1.7.0_71
HADOOP_HOME=/usr/local/hadoop/hadoop-2.5.0-cdh5.3.3
PATH=$JAVA_HOME/bin:$HADOOP_HOME/bin:$PATH
CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export JAVA_HOME
export HADOOP_HOME
export PATH
export CLASSPATH

执行:source/etc/profile  使环境变量生效

-------------------------------------------------------------------------------------------------------

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值