2016年09月_魔鬼_

12月 11月 10月 09月 08月 07月 05月 04月 03月 01月

原创 Hadoop-2.7.2&Hbase-1.2.2&Hive1.2.1(远程模式)&zookeeper-3.4.8全分布式环境搭建

一、环境： 1、centos6.5 64Bit 2、jdk7 3、haddop集群结构： master : 192.168.19.129 slave1 :　192.268.19.130 slave1 :　192.268.19.131 hive的元数据存放库，mysql数据库地址：192.168.19.134 4、zookeeper集群结构：

2016-09-25 19:24:00 1016

原创 hive1.2.1配置错误（ Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D）

环境：hive的远程模式在客户端环境操作：解决方案如下： 1.查看hive-site.xml配置，会看到配置值含有”system:java.io.tmpdir”的配置项 2.新建文件夹/home/grid/hive-0.14.0-bin/iotmp 3.将含有”system:java.io.tmpdir”的配置项的值修改为如上地址启动hive，成功！[hadoop@slave1 b

2016-09-25 15:05:43 698

原创 centos下ssh免秘钥登录突然失效问题解决

但前Hadoop集群启动的时候需要输入下属节点的密码，即ssh免秘钥登录失效，折腾了一天找到原因如下： [test@ceshiserver234 .ssh]$ssh -v localhost OpenSSH_5.3p1, OpenSSL 1.0.1e-fips 11 Feb 2013 debug1: Reading configuration data /etc/ssh/ssh_config

2016-09-25 13:56:50 5413

centos7_hadoop2.7.3_编译所需工具

在centos7下编译hadoop2.7.3所需工具：apache-ant-1.9.4-bin.tar.gz、apache-maven-3.3.3-bin.tar.gz、findbugs-3.0.1.tar.gz、hadoop-2.7.3-src.tar.gz、protobuf-2.5.0.tar.gz

2017-04-17