2019年01月_huicooling

原创启动hbase后没有hmaster进程

配置好HBASE的环境变量和配置文件后，启动HBASE后，查看进程，没有hmaster进程，于是百度后参考了这篇博客解决了问题，需要编译一下，命令：[root@cluster-3 conf]# cp $HBASE_HOME/lib/client-facing-thirdparty/htrace-core-3.1.0-incubating.jar $HBASE_HOME/lib/再次启动后...

2019-01-27 14:55:51 15203

原创 Logging initialized using configuration in jar:file:/usr/local/apache-hive-2.3.4/lib/hive-common-2.3

执行./hive后，一直卡在这里Logging initialized using configuration in jar:file:/usr/local/apache-hive-2.3.4/lib/hive-common-2.3.4.jar!/hive-log4j2.properties Async: true最后给我报错：Exception in thread "main" jav...

2019-01-26 15:36:55 19336 8

原创 bash: schematool: 未找到命令的解决办法

初始化hive百度了一下是，输入后报错，如下：[root@cluster-1 conf]# schematool -dbType mysql -initSchemabash: schematool: 未找到命令...于是我就通过yum命令安装嘛，出错，报错如下：[root@cluster-1 conf]# yum -y install schematool已加载插件：faste...

2019-01-26 15:20:14 30154 11

原创 Hadoop HA集群的搭建（5个节点）

特别说明，做大数据需要特别好的电脑配置，处理器至少i5吧,i5-8300H，显卡尽量GTX的，GTX1050，内存得有8G吧（我的是16G）软件准备：jdk-1.8.0_191;hadoop-2.8.5；zookeeper-3.4.12,软件下载可以就不说了，直接去官网下载即可系统准备：Centos7 64位一、集群规划：主机名 IP ...

2019-01-25 17:29:13 6105 1

原创 19/01/24 22:39:30 WARN ipc.Client: Failed to connect to server: cluster-6/192.168.79.136:8485: 的解决办法

搭建HA集群，格式化namenode，一直出现这种现象，说我的集群6连接不上百度，试了很多种方法，还是不行，最后进入cluster-6查看防火墙是否开着，利用命令systemctl status firewalld结果防火墙正在运行，如下所示：[root@cluster-6 logs]# systemctl status firewalld● firewalld.se...

2019-01-24 22:46:56 4409 1

原创 zookeeper的下载、安装以及配置和zookeeper集群的搭建

我这里只有六台集群：192.168.79.131 cluster-3192.168.79.130 cluster-1192.168.79.133 cluster-2192.168.79.134 cluster-4192.168.79.135 cluster-5192.168.79.136 cluster-6一、zookeeper下载这里从官网...

2019-01-24 13:50:09 253

原创 Hadoop下载、安装、配置、免密码登录以及shell命令说明

镜像环境：centos7_64位，可去官网进行下载hadoop版本：hadoop-2.8.5,可去官网下载安装hadoop的前提必须要安装jdk，这个很简单的，不易细说jdk的安装。一、hadoop下载，我这里下载的是hadoop-2.8.5.tar.gz二、hadoop安装（1）、在虚拟机下新建目录soft,命令：mkdir soft（2）、将下载的hadoop上传到虚拟...

2019-01-24 13:27:14 450

原创利用FileZilla上传本地文件到虚拟机下出现上传失败

利用FileZilla上传本地文件到虚拟机下出现上传失败的现象，查阅了许多资料，还在虚拟机上开启ssh服务等，赶紧越走越偏最后才发现是我的权限不够造成的，一直是用的普通用户进行登陆的，如下所示：最后只得将该用户改成root用户，如下所示结果一下就上传成功了！...

2019-01-18 16:29:22 1541 1

huicooling的博客