linux
文章平均质量分 77
yehao0716
这个作者很懒,什么都没留下…
展开
-
使用MapReduce对数据文件进行切分
有一个格式化的数据文件,用\t分割列,第2列为产品名称。现在需求把数据文件根据产品名切分为多个文件,使用MapReduce程序要如何实现? 原始文件: [root@localhost opt]# cat aprData 1 a1 a111 2 a2 a211 3 a1 a112 4 a1 a...2016-05-01 22:53:52 · 2223 阅读 · 0 评论 -
hadoop2.5.1集群搭建:(一)搭建手工切换ha的hdfs集群
-----------------------------1.搭建手工切换HA(high availibility)的HDFS集群-----------------------------namenode:hadoop1和hadoop2datanode:hadoop3、hadoop4、hadoop5、hadoop6journalnode:hadoop1、hadoop2、hadoop3 ...2014-11-01 11:53:23 · 140 阅读 · 0 评论 -
hadoop2.5.1集群搭建:(二)搭建自动切换HA的HDFS集群
搭建自动切换HA的HDFS集群(比手工切换ha集群,多了zookeeper集群)----------------------------------------------------------------------------------------------zookeeper:hadoop2-1、hadoop2-2、hadoop2-3namenode:hadoop2-1和hadoo...2014-11-03 23:36:23 · 164 阅读 · 0 评论