![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
Meyaoo
这个作者很懒,什么都没留下…
展开
-
Zookeeper安装配置及可视化ZKUI安装配置(zookeeper3.4.6)
一、Zookeeper安装配置安装配置jdk解压Zookeeper的tar安装包修改配置文件cd /hadoop/zookeeper-3.4.6/conf/cp zoo_sample.cfg zoo.cfgvim zoo.cfg修改:dataDir=/weekend/zookeeper-3.4.5/data在最后添加:(几个Zookeeper机器就写几个~)server.1=hadoo原创 2016-04-17 22:07:52 · 2843 阅读 · 0 评论 -
Kafka安装配置及简单通道传输操作(kafka2.9.2)
Storm单机伪分布配置图文详细步骤一. Zookeeper安装配置(zookeeper3.4.6)安装配置jdk解压Zookeeper的tar安装包修改配置文件vim conf/zoo.cfg 修改配置文件中的dataDir、dataLogDir、server.1 启动zookeeper bin/zkServer.sh start启动后查看状态 bin/zkServer.sh st原创 2016-04-05 21:56:29 · 2792 阅读 · 2 评论 -
Hadoop分布式集群环境搭建(三节点)
一、安装准备创建hadoop账号更改ip安装Java 更改/etc/profile 配置环境变量export $JAVA_HOME=/usr/java/jdk1.7.0_71修改host文件域名172.16.133.149 hadoop101172.16.133.150 hadoop102172.16.133.151 hadoop103 安装ssh 配置无密码登录解压hadoop/ha原创 2016-05-01 09:59:51 · 1836 阅读 · 0 评论 -
Hadoop2.6.2完全分布式集群HA模式安装配置详解
一、机器配置清单(8节点)hadoop100 节点:NameNode、DFSZKFailoverController(ZKFC)hadoop101 节点:NameNode、DFSZKFailoverController(ZKFC)hadoop102: 节点:ResourceManagerhadoop103: 节点:ResourceManagerhadoop104: 节点:Data原创 2016-04-13 16:15:43 · 7410 阅读 · 2 评论 -
Hadoop2.*源码分析之Job任务提交与执行
写MapReduce程序创建一个Job执行时一般使用下面这个方法System.exit(job.waitForCompletion(true) ? 0 : 1);今天来分析以下Job是如何被执行的waitForCompletion方法中真正提交job的代码如下: /** * Submit the job to the cluster and wait for it to finish.原创 2016-05-01 23:28:52 · 1790 阅读 · 0 评论 -
六台Debian主机安装搭建Cloudera Manager 5和CDH5(版本5.9.0)大数据集群
系统环境: 六台虚拟主机 操作系统:Debian 7(8核,32G,512G硬盘) Cloudera Manager:5.9.0 CDH: 5.9.0192.168.0.xx cdh1 192.168.0.xx cdh2 192.168.0.xx cdh3 192.168.0.xx cdh4 192.168.0.xx cdh5 192.168.0.xx cdh6相关资源下载: 1原创 2016-12-05 15:41:39 · 3652 阅读 · 1 评论 -
CentOS6安装搭建Cloudera Manager 5和CDH5(版本5.13.3)大数据集群
系统环境: 四台虚拟主机 操作系统:CentOS 6(8核,16G,512G硬盘) Cloudera Manager:5.13.3 CDH: 5.13.3192.168.1.xx bigdata1 192.168.1.xx bigdata2 192.168.1.xx bigdata3 192.168.1.xx bigdata4相关资源下载: 1.Cloudera ...原创 2020-03-10 13:37:31 · 656 阅读 · 0 评论