bigData
文章平均质量分 66
UP-GIS
这个作者很懒,什么都没留下…
展开
-
jstorm安装配置
jstorm安装配置 前言 下载 配置启动 前言jstorm介绍jstorm JStorm 是一个类似Hadoop MapReduce的系统, 用户按照指定的接口实现一个任务,然后将这个任务递交给JStorm系统,Jstorm将这个任务跑起来,并且按7 * 24小时运行起来,一旦中间一个Worker 发生意外故障, 调度器立即分配一个新的Worker替换这个失效的Worker。 因此,从应原创 2016-01-03 19:34:48 · 5419 阅读 · 0 评论 -
MiniHbaseCluster测试Hbase BulkLoad
在调试MR任务或者操作Hbase表时,往往我们需要将本地代码打成Jar包,然后上传到Hadoop集群上去跑,这样不仅麻烦,还不方便调试,Hadoop开发团队提供了在本地调试代码的API,就是MiniHbaseCluster, 在本机JVM中模拟一个Hadoop集群,与真实环境的Hadoop集群并没有区别,方便我们提交任务和Debug。笔者要把Hive表中的数据生成HFile文件,然后BulkLoad原创 2016-09-18 14:04:17 · 1350 阅读 · 3 评论