![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
GXU-数据与网络实验室
这个作者很懒,什么都没留下…
展开
-
storm-hbase集成:win7下用eclipse开发ubuntu上的storm-hbase程序
平时任务实在比较忙,只能先记录简单步骤,后续再写详细说明。win7下eclipse中开发统一局域网内hbase程序简单操作步骤win7下管理统一局域网内的集群1.3台ubuntu服务器作为实验机器,一台win7作为管理机器,网线都在同一个交换机上。 2.3台主机关闭防火墙,并开通ssh服务。 3.在win7上安装xshell 用来进行命令操作3台主机。安装winscp来进行...原创 2017-10-07 14:56:03 · 498 阅读 · 0 评论 -
linux中profile对常用的软件的路径配置
linux中profile对常用的软件的路径配置(记录)export JAVA_HOME=/opt/javaexport PATH=$PATH:$JAVA_HOME/binexport ZK_HOME=/opt/zookeeperexport PATH=$PATH:$ZK_HOME/binexport STORM_HOME=/opt/apache-storm-1.1.1export PATH=原创 2017-10-05 20:42:00 · 698 阅读 · 0 评论 -
集群启动使用Hadoop,运行后没有NameNode节点
集群启动Hadoop后,运行后有SecondNameNode和dataNode,但是没有NameNode节点?解决方法:1、先运行stop-all.sh 2、运行hadoop namenode -format 3、运行start-all.sh原创 2017-10-05 21:33:55 · 7848 阅读 · 5 评论 -
hadoop起动后没有datanode的问题
查看日志后发现:java.io.IOException: Incompatible clusterIDs in /home/storm/hadoop/dfs/data: namenode clusterID = CID-bee17bb7-308b-4e4d-b059-3c73519a9d0e; datanode clusterID = CID-7fca37f0-a600-4e89-a012-aec2原创 2017-10-06 11:48:22 · 3017 阅读 · 0 评论 -
分布式环境下hadoop-2.8.1,hbase-1.3.1的配置文件
分布式环境下hadoop-2.8.1,hbase-1.3.1的配置文件我想说的是,各种配置问题太多,一个不对就可能节点挂掉,节点不能启动等问题,配置步骤已经写过,现在把配置文件记录一下,为以后方便使用。hadoop目录下(h1主节点)core-site.xml<?xml version="1.0" encoding="UTF-8"?><?xml-styles...原创 2017-10-06 15:31:40 · 594 阅读 · 0 评论 -
Hbase启动后,在主节点只有Hmaster,而在slave节点上没有Hregionserver
当所有问题都排查,配置没有错误的情况下,查了网上,一般都是集群时间不同步的问题。日志被删掉了,所以不贴出来,大家遇到此类问题可以顺手看下时间是否同步。解决方式date #查看时间是否同步 如果不同步,可以采用多种方式解决,我采用的的是最简单的方法: sudo date -s 13:50:00 #这个时间是当下的标准时间,手工调节3台电脑的时间基本一致 重新启动服务后,成功!原创 2017-10-06 14:24:46 · 6887 阅读 · 1 评论 -
Hadoop,Hbase分布式集群配置手册
在网上搜集了各种配置,经常会出错,现在把自己已经成功配置处理来的一份配置晒出来。1.伪分布式配置手册hadoop-2.6.0habase-2.2.6hadoop中的部分配置core-site.xml<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" hre...原创 2018-03-28 16:44:10 · 167 阅读 · 0 评论