![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 69
飞翔吧胖子
胖子很胖但想飞翔
展开
-
hadoop集群安装
在hadoop伪分布的安装基础上,进行hadoop的集群安装。本机实验采用三个节点,安装操作系统为centos,假设每台机子的hostname分别为hadoop、hadoop1、hadoop2,ip地址分别为192.168.0.1、192.168.0.2、192.168.0.3,参照hadoop的伪分布部署顺序进行,其中需要进行修改的地方有重新配置/etc/hosts,将集群中所有的i原创 2014-03-09 21:58:36 · 634 阅读 · 0 评论 -
hadoop1.1.2的伪分布部署
本次学习hadoop伪分布部署采用了三个节点,每个节点装了centos操作系统。进入节点设置其ip地址,设置之后重启网卡,执行命令service network restart验证:执行命令ifcofig修改主机名 (1)使用hostname查看主机名,使用hostname newname 修改当前会话的主机名 (2)修改配置文件中的主机名,执行命令原创 2014-03-09 21:43:34 · 624 阅读 · 0 评论 -
为集群增加新节点
在配置完成一个有三个节点的集群后,当需要增加新的节点时,可以按照如下操作在/etc/hosts中配置整个集群中的主机名和ip地址的映射,并且将新的hosts文件拷贝到整个集群中在新的节点中安装好hadoop把namenode中的有关配置文件复制到新节点如 core-site.xml、hdfs-site.xml、mapred-site.xml,同时也可以将所有节点中的dfs.re原创 2014-03-09 22:09:48 · 1492 阅读 · 0 评论 -
Hive-0.12.0配置安装
Hive安装及配置,准备工作:1).安装JDK2).安装Hadoop3).安装MySQL5.x上面都安装好后,接下来就可以安装Hive了,目前最新版本为hive0.10.0,从hive0.8.0开始,就支持hadoop1.x了,这里安装的是hive0.8.1,具体步骤如下:原创 2014-05-02 09:39:45 · 570 阅读 · 0 评论 -
zookeeper分布安装笔记
zk介绍ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行原创 2014-05-03 21:23:42 · 485 阅读 · 0 评论 -
HBase安装配置
HBase是依赖Hadoop的数据存储系统,可以实现大数据(过亿条记录)的存储,进行并行化处理。在特定的场景下HBase有自己的用武之地。原创 2014-05-03 21:43:58 · 554 阅读 · 0 评论 -
在window下的eclipse中远程编写Hadoop程序
本人在服务器上搭建了一个基于hadoop1.1.3版本的原创 2014-04-25 10:07:58 · 674 阅读 · 0 评论