hadoop
习惯了一个人面对所有
这个作者很懒,什么都没留下…
展开
-
Missing Hive Execution Jar: /home/whzy/software/HADOOP/apache-hive-2.1.1-bin//lib/hive-exec-*.jar
出现如下问题:Missing Hive Execution Jar: /home/whzy/software/HADOOP/apache-hive-2.1.1-bin//lib/hive-exec-*.jar就应该将$PWD/apache-hive-2.1.1-bin/改为hive的安装路径export HIVE_HOME=$PWD/apache-hive-2.1.1-bin/export...原创 2019-12-10 09:22:22 · 1343 阅读 · 0 评论 -
hive安装教程
安装hive在master节点上,进入压缩包所在的目录,移动并解压Hive安装包[whzy@master ~]$ cd software/[whzy@master software]$ mv apache-hive-2.1.1-bin.tar.gz ~/[whzy@master software]$ cd[whzy@master ~]$ tar -zxvf apache-hive-2.1...原创 2019-12-06 22:15:36 · 271 阅读 · 0 评论 -
Zookeeper的常用Shell命令
启动zookeeper服务后,在其中一台机器上执行客户端脚本可连接到zookeeper服务[whzy@master zookeeper-3.4.12]$ bin/zkCli.sh -server slave:2181,slave2:2181使用create命令在客户端shell下创建目录,并查看[zk: slave:2181,slave2:2181(CONNECTED) 28] creat...原创 2019-12-06 19:25:04 · 444 阅读 · 0 评论 -
安装Hbase
[whzy@master ~]$ cd software/[whzy@master software]$ mv hbase-1.2.6-bin.tar.gz ~/[whzy@master software]$ cd[whzy@master hbase-1.2.6]$ cd conf[whzy@master conf]$ vi hbase-env.sh将下面的内容就修改#export JA...原创 2019-12-03 10:06:09 · 120 阅读 · 0 评论 -
安装zookeeper
[whzy@master ~]$ cd zookeeper-3.4.12[whzy@master zookeeper-3.4.12]$ cd conf[whzy@master conf]$ cp zoo_sample.cfg zoo.cfg[whzy@master conf]$ vi zoo.cfg[whzy@master ~]$ mkdir -p /home/whzy/tmp/zoo...原创 2019-12-02 22:12:10 · 98 阅读 · 0 评论 -
启动hadoop集群
接之前的Hadoop配置的博客,配置都配好了。1.把配置好的hadoop-2.7.3复制到slave上[whzy@master ~]scp -r /home/whzy/hadoop-2.7.3 @slave:~/2.创建数据目录,分别在master和slave上[whzy@master ~]mkdir ~/hadooptmpdata[whzy@slave ]mkdir/hadooptmp...原创 2019-11-30 20:33:30 · 4182 阅读 · 2 评论 -
Hadoop配置
解压Hadoop安装包[whzy@master software]$ cp hadoop-2.7.3.tar.gz ~/[whzy@master ~]$ tar -xvf hadoop-2.7.3.tar.gz检查是否是否成功配置环境配置环境变量hadoop-env.shwhzy@master hadoop]$ vi hadoop-env.sh将export JAVA_HOM...原创 2019-11-30 11:16:21 · 231 阅读 · 0 评论 -
搭建Hadoop配置免密
生成一对公私密钥:[whzy@master ~]$ ssh-keygen -t rsa连续三个回车进入/home/whzy/.ssh:[whzy@master ~]$ cd ~/.ssh复制密钥文件:[whzy@master .ssh]$ cat id_rsa.pub >> ~/.ssh/authorized_keys修改authorized_keys文件权限:[...原创 2019-11-30 09:25:04 · 436 阅读 · 0 评论 -
Linux系统JDK配置
配置文件 ~/.bash_profile配置内容export JAVA_HOME=/usr/java/jdk1.8.0_161export PATH=JAVAHOME/bin:JAVA_HOME/bin:JAVAHOME/bin:PATH检验是否配置好:查一下Java版本java -version...原创 2019-11-29 23:09:26 · 89 阅读 · 0 评论 -
tar解压报错
我在Linux上配置JDK时,解压jdk-8u161-linux-x64.tar.gz时报错,所以我把jdk-8u161-linux-x64.tar.gz重新复制了,就好了。gzip: stdin: unexpected end of filejdk1.8.0_161/jre/lib/amd64/libmanagement.sotar: Unexpected EOF in archivet...原创 2019-11-29 22:20:14 · 503 阅读 · 0 评论