- 博客(8)
- 收藏
- 关注
RSS订阅转载 往hdfs上写入数据
public static void wrteFileHdfs(String localSrc,String hdfsPath){ try { InputStream in=new BufferedInputStream(new FileInputStream(localSrc)...
2016-06-24 16:48:00
312
转载 从hdfs上读取数据
第一种办法：使用hadoop url读取数据（这种方法在一个java虚拟机中只能调用一次，因此需要放在一个静态方法中） static{ URL.setURLStreamHandlerFactory(new FsUrlStreamHandlerFactory()); } ...
2016-06-24 16:47:00
273
转载 Hadoop2.5.2 HA高可靠性集群搭建(Hadoop+Zookeeper)
二.Hadoop（HA）集群的搭建 2.1 配置详细 主机名 IP NameNode DataNode Year Zookeeper JournalNode mast1 192.16...
2016-06-24 16:45:00
86
转载 Storm运行代码 案列
写一个HelloWord Storm 我们现在创建这么一个应用，统计文本文件中的单词个数，详细学习过Hadoop的朋友都应该写过。那么我们需要具体创建这样一个Topology，用一个spout负责读取文本文件，用第一个bolt来解析成单词，用第二个bolt来对解析出的单词计数，整体...
2016-06-14 14:12:00
186
转载 storm应用场景
1、流聚合 流聚合把两个或者多个数据流聚合成一个数据流 — 基于一些共同的tuple字段。 builder.setBolt(5, new MyJoiner(), parallelism) .fieldsGrouping(1, new Fields("joinfield1", "join...
2016-06-14 14:07:00
157
转载 Ambari源码编译安装
1.2需要安装的工具 1.2.1安装JDK 输入命令 [root@bigData-02 ~]# java –version java version "1.7.0_51" Java(TM) SE Runtime Environment (build 1.7.0_51-...
2016-06-14 13:56:00
232
转载 Ambari删除脚本 重新安装
#1.删除hdp.repo和hdp-util.repocd /etc/yum.repos.d/rm -rf hdp*rm -rf HDP*#rm -rf ambari*#2.删除安装包#用yum list installed | grep HDP来检查安装的ambari的包yum...
2016-06-14 13:54:00
209
转载 Ambari 在线安装
安装所需条件 2.1操作系统的需求 Red Hat Enterprise Linux (RHEL) 版本5.x 或者 6.x (64位) CentOS版本5.x 或者 6.x (64位) Oracle Linux版本5.x 或者 6.x (64位) SUSE Linu...
2016-06-14 13:53:00
102
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人