Storm入门(十四)Trident API Overview

The core data model in Trident is the "Stream", processed as a series of batches. A stream is partitioned among the nodes in the cluster, a...

2018-02-07 10:24:26

阅读数:122

评论数:0

Storm入门(十三)Storm Trident 教程

转自:http://blog.csdn.net/derekjiang/article/details/9126185 英文原址:https://github.com/nathanmarz/storm/wiki/Trident-tutorial ---------------- T...

2018-02-07 10:23:35

阅读数:128

评论数:0

Storm入门(十二)Twitter Storm: DRPC简介

作者: xumingming | 可以转载, 但必须以超链接形式标明文章原始出处和作者信息及版权声明 网址: http://xumingming.sinaapp.com/756/twitter-storm-drpc/ 本文翻译自: https://github.com/nathanmarz/s...

2018-02-07 10:08:39

阅读数:94

评论数:0

Storm入门(十一)Twitter Storm源代码分析之CoordinatedBolt

作者: xumingming | 可以转载, 但必须以超链接形式标明文章原始出处和作者信息及版权声明 网址: http://xumingming.sinaapp.com/811/twitter-storm-code-analysis-coordinated-bolt/ 关于Twitter ...

2018-02-07 10:07:11

阅读数:56

评论数:0

Storm入门(十)Twitter Storm: Transactional Topolgoy简介

作者: xumingming | 可以转载, 但必须以超链接形式标明文章原始出处和作者信息及版权声明 网址: http://xumingming.sinaapp.com/736/twitter-storm-transactional-topolgoy/ 本文翻译自: https://git...

2018-02-06 19:31:49

阅读数:58

评论数:0

Storm入门(九)Storm常见模式之流聚合

流聚合(stream join)是指将具有共同元组(tuple)字段的数据流(两个或者多个)聚合形成一个新的数据流的过程。 从定义上看,流聚合和SQL中表的聚合(table join)很像,但是二者有明显的区别:table join的输入是有限的,并且join的语义是非常明确的;而流聚合的语...

2018-02-06 19:30:05

阅读数:131

评论数:0

Storm入门(八)Storm实战常见问题总结(持续更新)

一、本地环境log级别设置问题 storm-core-1.1.0.jar下面有个log4j2.xml文件,默认log级别是info。 configuration monitorInterval="60"> Appenders> Conso...

2018-02-06 19:28:45

阅读数:108

评论数:0

Storm入门(七)可靠性机制代码示例

一、关联代码 使用maven,代码如下。 pom.xml  参考 http://www.cnblogs.com/hd3013779515/p/6970551.html MessageTopology.java package cn.ljh.storm.reliabili...

2018-02-06 19:27:22

阅读数:69

评论数:0

Storm入门(六)深入理解可靠性机制

转自http://blog.csdn.net/zhangzhebjut/article/details/38467145 一 可靠性简介        Storm的可靠性是指Storm会告知用户每一个消息单元是否在一个指定的时间(timeout)内被完全处理。完全处理的意思是该Mess...

2018-02-06 19:26:17

阅读数:163

评论数:0

Storm入门(五)Twitter Storm如何保证消息不丢失

转自:http://xumingming.sinaapp.com/127/twitter-storm如何保证消息不丢失/ storm保证从spout发出的每个tuple都会被完全处理。这篇文章介绍storm是怎么做到这个保证的,以及我们使用者怎么做才能充分利用storm的可靠性特点。 ...

2018-02-06 19:25:33

阅读数:115

评论数:0

Storm入门(四)WordCount示例

一、关联代码 使用maven,代码如下。 pom.xml  和Storm入门(三)HelloWorld示例相同 RandomSentenceSpout.java /** * Licensed to the Apache Software Foundation (ASF...

2018-02-06 19:24:25

阅读数:146

评论数:0

Storm入门(三)HelloWorld示例

一、配置开发环境 storm有两种操作模式: 本地模式和远程模式。使用本地模式的时候,你可以在你的本地机器上开发测试你的topology, 一切都在你的本地机器上模拟出来; 用远程模式的时候你提交的topology会在一个集群的机器上执行。 建议使用maven,只需要加上storm的依...

2018-02-06 19:23:27

阅读数:106

评论数:0

Storm入门(二)集群环境安装

1.集群规划 storm版本的变更: storm0.9.x   storm0.10.x  storm1.x 上面这些版本里面storm的核心源码是由Java+clojule组成的。 storm2.x 后期这个版本就是全部用java重写了。 (阿里在很早的时候就对storm进行了重写...

2018-02-06 19:21:58

阅读数:88

评论数:0

Storm入门(一)原理介绍

问题导读: 1.hadoop有master与slave,Storm与之对应的节点是什么? 2.Storm控制节点上面运行一个后台程序被称之为什么? 3.Supervisor的作用是什么? 4.Topology与Worker之间的关系是什么? 5.Nimbus和Supervisor之间的所...

2018-02-06 19:20:36

阅读数:145

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭