storm
July-2010
这个作者很懒,什么都没留下…
展开
-
【转】window10单机安装storm集群
window10单机安装storm集群适合范围:storm自由开源的分布式实时计算系统,擅长处理海量数据。适合处理实时数据而不是批处理。安装前的准备1.安装zookeeper①下载zookeeperhttps://zookeeper.apache.org/,点击download进入新页面之后,—>download,选择一个镜像文件下载到本地;②下面是我选择的文件http://mir...转载 2019-08-19 17:05:30 · 396 阅读 · 0 评论 -
Storm分布式实时计算模式部分读书笔记第一章
当topology发布时,所有的bolt和spout组件首先会进行序列化,然后通过网络发送到集群中,如果spout或者bolt在序列化之前(比如:构造函数)生成,实例化了任何无法序列化的实例变量,在进行序列化时会抛出NotSerializableException异常,部署失败;通常情况下,最好是在构造函数中对基本数据类型和可序列化的对象进行赋值和实例化,在prepare方法中,对不可序列化的对...原创 2019-08-22 15:30:48 · 129 阅读 · 1 评论 -
Storm分布式实时计算模式部分读书笔记第二章
Puppet工具可进行自动化安装Storm,有利于部署多节点的集群;Storm集群包括一个主节点:nimbus和多个工作节点:supervisor,除此之外,Storm还需要一个Zookeeper实例;nimbus和supervisor是Storm提供的后台守护进程,可以共同存在同一台机器上;nimbus:协调和监控集群上运行的topology,包括topology的发布、任务指派、事件...原创 2019-08-22 17:26:14 · 129 阅读 · 0 评论