- 博客(2)
- 收藏
- 关注
RSS订阅原创 Apache Pig Reducer OOM 解决 -- Big DataBag
最近遇到一次Pig的reducer频繁OOM的问题, 记录一下解决过程. 问题描述 有一段pig代码, 示例如下: Data = group SourceData all; Result = foreach Data generate group, COUNt(SourceData); store Result into 'XX'; 简单的使用group all 后计
2012-07-10 18:33:47
4374
原创 Erlang Rebar 创建工程总结
Erlang的application类似Java中的工程, 有两种类型: 类库和独立运行的application. 好比java中的单纯的作为其他项目的类库(如memcached 客户端) 和 独立运行的工程(如hadoop), 并且可运行的application也是可以作为其他application的依赖的. 工程目录结构 使用rebar创建工程时, 两种application工程的
2012-07-08 22:56:30
8188
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人