- 博客(10)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 HBASE完全分布式配置
1.启动zookeeper集群2.启动hadoop集群，基本要启动hdfs3.上传解压hbase的包，配置conf/hbase-env.shexport JAVA_HOME=/opt/soft/jdk1.7.0_79export HBASE_CLASSPATH=/opt/soft/hadoop-2.5.1/etc/hadoopexport HBASE_MANAGES_ZK=fa
2017-07-25 00:43:32
654
原创 HDFS高可用配置
在前面安装完成完全分布式的基础上改造为高可用1.安装启动zookeepera)上传解压zookeeper包b)cp zoo_sample.cfg zoo.cfg修改zoo.cfg文件c)dataDir=/opt/data/zookeeperserver.1=node1:2888:3888server.2=node2:2888:3888server.3=node3
2017-07-25 00:40:56
684
原创 HDFS完全分布式配置
准备阶段，每个节点安装jdk，配置环境变量，注意安装的位置要一致注意：1.每台机器的防火墙关闭2.每台机器配置时间自动同步，或者简单点每台机器时间保持一致（相差不超过30秒）yum -y install ntpdate/usr/sbin/ntpdate -u pool.ntp.org */10 * * * * /usr/sbin/ntpdat
2017-07-25 00:29:35
679
2
转载 hadoop系列文档3-配置Hdfs高可用HA
版权声明：本文为博主原创文章，未经博主允许不得转载。目录(?)[-]背景架构设计如何配置HAQJM分配每个节点需要安装的服务hdfs-sitexml中的配置信息Core-sitexml中的配置如何启动Step1 启动JournalNode集群Step2 格式化NameNodeStep3 转成ActiveZookeeper应用自动灾难恢复S
2017-07-18 11:42:29
1220
转载 Hadoop NameNode 高可用 (High Availability) 实现解析
在 Hadoop 1.0 时代，Hadoop 的两大核心组件 HDFS NameNode 和 JobTracker 都存在着单点问题，这其中以 NameNode 的单点问题尤为严重。因为 NameNode 保存了整个 HDFS 的元数据信息，一旦 NameNode 挂掉，整个 HDFS 就无法访问，同时 Hadoop 生态系统中依赖于 HDFS 的各个组件，包括 MapReduce、Hive、Pi
2017-07-18 10:24:48
439
转载 Hadoop与Hbase兼容性
HadoopThe following table summarizes the versions of hadoop supported with each version of Hbase. Based on the version of hbase, you should select the most appropriate version of Hadoop. You can
2017-07-18 00:40:26
899
转载 hadoop错误，重新格式化namenode后，出现java.io.IOException Incompatible clusterIDs
摘要： 错误: java.io.IOException: Incompatible clusterIDs in /data/dfs/data: namenode clusterID = CID-d1448b9e-da0f-499e-b1d4-78cb18ecdebb; datanode clust错误: java.io.IOException: Incompati
2017-07-17 22:28:40
952
转载 Hadoop2.6+HA+Zookeeper3.4.6+Hbase1.0.0安装
安装hadoop2.6+HA1.准备一台CentOS6.4系统2.环境CentOS6.4 共5台机器名 ip地址 安装软件 运行进程 master1 192.168.3.141 Hadoop、Zookeeper、Hbase NN、RM、DFSZKFC、journalNode、HMaster、QuorumPeerMain master2 192.168.3.142
2017-07-17 19:48:15
400
转载 Hadoop1.x 分佈式安裝
下面博文已更新，请移步 ↑ 用于测试，我用4台虚拟机搭建成了hadoop结构我用了两个台式机。一个xp系统，一个win7系统。每台电脑装两个虚拟机，要不然内存就满了。 1、安装虚拟机环境 Vmware，收费产品，占内存较大。 或 Oracle的VirtualBox，开源产品，占内存较小，但安装ubunt
2017-07-17 19:02:36
325
原创 hadoop-2.6.1安装
categories:- Hadoopdate: 2015-11-23 21:35:22---## 1.安装JDK 7### 1.1新建目录```shellmkdir /usr/local/jdk/```将jdk1.7.0_79.tar.gz解压到此目录,目录结构/usr/local/jdk/jdk1.7.0_79### 1.2全
2017-07-11 22:36:00
579
把该sql文件扔到sql analysis执行即可批量实现用户表的简繁内容转换
2010-06-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人