![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
WW.SS
很笨、很懒
展开
-
Samza的Task是如何运行在Yarn上的
分析Samza的源码,看看Samza是如何运行在Yarn上的。从提交一个Job开始,到AppMaster的启动,到向RM申请资源,和在NM上启动一个Container的一个整体过程。原创 2015-09-17 13:43:50 · 1310 阅读 · 0 评论 -
Samza如何划分Partition
在实际的应用中,为了合理利用资源,会增加并行处理。在Samza中可以将一个Job拆分成多个Partition来完成逻辑上的并行处理。那如何使用Partition呢。 我们需要考虑两个问题: 1、在Samza中如何指定Partition的数量 2、如何将我们的划分的数据分发到指定的Partition中原创 2015-09-21 10:36:47 · 777 阅读 · 0 评论 -
Mongo 保留字段的Collection的操作
Mongo 保留字段的Collection操作原创 2016-04-08 14:23:51 · 909 阅读 · 0 评论