2015年06月_jsky_studio

10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 Storm开发过程中遇到的Topology “hang"问题

题目中之所以用双引号标注”hang", 是因为自己碰到的问题并不是Topology程序真的hang住了，而是有其他原因。我曾经碰到的问题大致如下：提交Topology之后，刚开始的几小时是正常运行的，但系统处理的数据量之后会越来越少，直至变为0，就像Topology hang住一样。总结下自己在分析解决该问题时的思路：由于特殊原因，刚开始没条件部署Storm UI，所以走了一些弯路。

2015-06-28 22:45:24 1342 1

原创 Flume 1.6.0 源码编译问题总结

简言之：$ cd apache-flume-1.6.0$ mvn compile $ mvn install ======> 打包出jar包编译Flume最大的问题是不管默认的maven repository还是oschina之类的国内镜像，编译下载依赖的速度都跟蜗牛一样，严重影响效率。后来查找资料，找到一个下载速度非常不错的r

2015-06-14 03:10:51 1618

原创如何解决Kerberos问题: "Server has invalid Kerberos principal: hdfs/host2@****.COM"

在试图连接带有Kerberos安全认证的CDH Hadoop集群时，碰到标题所述问题：（已经按要求替换了jre中的security目录下两个jar包，也已经导入证书，具体过程略）问题样例： 13/10/25 10:52:24 ERROR security.UserGroupInformation: PriviledgedActionException as:user/hos

2015-06-12 00:44:46 8956 1

转载 Zookeeper安装与配置

每次安装 zookeeper都会查一遍，索性记下来。为尊重原文作者，仅记下如下链接： http://coolxing.iteye.com/blog/1871009

2015-06-06 17:42:10 637

Hadoop快速入门七步走

本文整理了网上搜集的Hadoop资料，共7个文件。学习顺序可以按照命名规则 STEP1__XXX --> STEP6__XXX; STEP7_XXX.pdf可以作为工具书参考。适合对大数据感兴趣的初学者快速入门。欢迎大家提出宝贵意见或建议。

2018-04-28

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人