storm
tags
主要研究大数据计算平台以及应用算法。
展开
-
Storm如何保证消息不丢失 (Guaranteeing-message-processing)
转自: http://xumingming.sinaapp.com/127/twitter-storm如何保证消息不丢失/本文翻译自: https://github.com/nathanmarz/storm/wiki/Guaranteeing-message-processingstorm保证从spout发出的每个tuple都会被完全处理。这篇文章介绍storm是怎么做到这个保证的,以及我们使用者怎转载 2016-03-11 11:21:51 · 598 阅读 · 0 评论 -
利用VisualVM监视Storm Worker性能
一、Jstatd的相关配置1. 创建jstatd权限配置文件jstatd.all.polocygrant codebase "file:${java.home}/../lib/tools.jar" { permission java.security.AllPermission; }; 2、启动jstatd jstatd -J-Djava.rmi.server.hostnam原创 2016-03-28 15:48:18 · 777 阅读 · 0 评论 -
Storm IScheduler的初次尝试
1. 介绍 本章主要介绍 IScheduler 接口的作用以及相关功能。Storm 默认的调度机制非常成熟,它能把 Topology 里面的每一个 Component 平均分配到 Worker 以及 Node 上,但是并不能充分地利用节点资源,导致 Node 上有过多的空闲资源。而 IScheduler 接口能自定义调度方式,用户可以根据业务以及资源的情况来分配具体的 Component 所在的位置原创 2016-07-26 16:19:18 · 1083 阅读 · 0 评论