hadoop
文章平均质量分 77
myhirra
个人blog:https://hirra.cn 渴望与有理想的人共同进步。
展开
-
hadoop集群基本配置(大数据学习跟进)
最近在学习hadoop。网上具体过程很多,我就说说简单过程和注意问题。 今天学了下基本配置,主要配置dfs、mapreduce。 环境:宿主机(windows64),虚拟机(centos64) 准备软件: 1、Vmware——虚拟机 2、centos镜像文件——centos熟悉点 3、hadoop包——用的是1.1.2版本(主要是这个版本资料较多) 4、jdk——hadoop需要ja原创 2014-03-05 20:48:55 · 1072 阅读 · 0 评论 -
mapreduce程序编写(大数据学习跟进)
折腾了半天。终于编写成功了第一个自己的mapreduce程序,并通过打jar包的方式运行起来了。 运行环境:windows 64bit eclipse 64bit jdk6.0 64bit 一、工程准备 1、新建java project 2、导入jar包 新建一个user library 把hadoop文件夹里的hadoop-core和lib包里的所有包都导原创 2014-03-06 15:40:04 · 7079 阅读 · 1 评论 -
Zookeeper配置(大数据学习跟进)
Standalone模式 1、复制zoo_sample.cfg文件,命名为zoo.cfg 2、修改zoo.cfgtickTime=2000 dataDir=/Users/apple/zookeeper/data dataLogDir=/Users/apple/zookeeper/logs clientPort=4180 3、启动 bin/zkServer.sh原创 2014-03-10 14:36:22 · 763 阅读 · 0 评论