- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 hadoop实践(七):hbase伪分布式部署
HBase的安装对应与hadoop的三种版本,也有单机版和伪分布式、全分布式三种方式。 全分布式采用一组zookeeper来进行保持集群软件之间的一致性,具体在下一节说明。 一、目标 在伪分布式发布的hadoop主机上,安装配置hbase,并验证可用性 二、准备 1) 环境说明: 主机: linux虚拟机centos6.5 hadoo
2016-06-20 16:28:29 989
原创 hadoop实践(六)eclipse 打包和liunx下运行
在eclipse环境下开发的代码,可以打包并放入到linux环境的 hadoop 下运行。 第一步:打包 前提是已经安装了打包工具,fatjar。 首先eclipse右上角,从map/reduce 切换到java, 点击工程,右键会出现fat jar。 选中fatjar,打开打包配置界面。 执行finished后,eclip
2016-06-15 23:29:57 1026
原创 hadoop实践(五)win10+eclipse+hadoop2.6.4 开发环境
本人环境为win10(才从win7升级) eclipse是 Kepler Service Release 1 在win10下,安装了vm workstation,其上安装了centos6.5 ,并在上面部署了hadoop2.6.4的伪分布式安装 一、 目标 设置win10下的eclipse开发环境,并且可以在此环境上开发hadoop应用
2016-06-15 00:23:27 9266 1
原创 hadoop实践(四) hadoop伪分布式发布
集群发布试验后,后续要转向hadoop开发,所以下面要进行伪分布式发布和eclipse结合的实践。 hadoop伪分布式发布 第一步 规划 主机: 192.168.136.155, hostname master 主机操作系统; centos6.5 (虚拟机) (注: 我尝试设置主机hostname为 localhost,不
2016-06-14 00:12:24 888
原创 hadoop实践(三)hadoop 集群配置
第一步: 集群规划 master 192.168.136.140 slave1 192.168.136.151 slave2 192.168.136.152 第二步:配置环境变量: 1) vi /etc/profile 在最后面添加如下代码: export JAVA_HOME=/usr/java/jdk1.7.0_80 export JAVA_BIN=/
2016-06-12 23:11:27 1681
原创 hadoop实践(二)-hadoop和ssh配置
系统环境准备好后,还需要进行配置和hadoop软件的下载安装。 1、 ssh配置 这里的ssh配置是指ssh 配置无密钥登录,原因是因为hadoop集群环境下,有大量节点机器,所以配置无密钥登录 1.1: 系统主机和主机名配置 修改系统的主机名,比如本人实践的主机,设置为master.hadoop 需要修改2个文件, 修改操作使用 root用户
2016-06-12 14:28:06 1480
原创 hadoop实践(一)环境准备
1、 安装linux或者安装linux虚拟机 本人是安装linux虚拟机centos ,至于网上很多用乌班图,我觉的因为是实践,所以基本无差 2、 安装ssh linux 一般自带 rpm -qa |grep ssh 3、创建 hadoop用户 用root用户登录 创建用户组: groupadd hadoop
2016-06-12 14:04:04 840
centos6.5的python2.6.6 安装包和 yum安装包
2017-12-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人