博客专栏  >  综合   >  Storm基础应用

Storm基础应用

Strom基础知识点,集成KAFKA,ES , HBASE ,HDFS,REDIS等 参考官方文档:http://storm.apache.org/releases/ GitHub:https://github.com/GinoyJda

关注
1 已关注
16篇博文
  • STORM入门之(集成HDFS)

    总体 Storm集成hdfs需要做前期工作 1.hadoop单机版安装 2.自己写hdfs demo 查看是否写入成功 首先让我们来安装hadoop  版本:hadoop-native-64-2....

    2017-11-14 13:58
    153
  • 大数据组件Shell工具分享(storm redis es kafka flume zookeeper)

    目的 自己编写个工具 用于集群的信息获取与监控 可以及时查看问题,无需查找繁琐命令,直接配置好就可用 内容 组件包括 java进程查看,redis集合,kafka集合,es集合,zookeeper集合...

    2017-10-25 10:03
    43
  • STORM入门之(TridentAPI,partition)

    partitionAggregate partitionAggregate 会在一批 tuple 的每个分区上执行一个指定的功能操作。以下面这段代码为例: mystream.partitionAgg...

    2017-09-20 13:05
    62
  • STORM入门之(yaml配置文件说明)

    配置项 配置说明 storm.zookeeper.servers ZooKeeper服务器列表 storm.zookeeper.port ZooKeeper连接端口 storm.local...

    2017-09-18 09:13
    326
  • STORM入门之(TridentTopology集成Kafka)

    基本 前几篇文章是StormTopology集成Kafka 是Storm基本入门知识 传送门:http://blog.csdn.net/yl3395017/article/details/77477...

    2017-09-04 09:28
    329
  • STORM入门之(TridentAPI,Aggregation)

    基本介绍 Aggregation是Trident的基本基本api 主要作用是聚合,如下聚合方法作用是记录单词出现的次数 package com.storm.trident; import org....

    2017-09-01 12:44
    358
  • STORM入门之(TridentAPI,Each)

    1.基础 基础Topology与TritentTopology是不同的,就相当于JDBC VS Hibernate  ,Hibernate是基于JDBC实现的ORM架构,二者本质是相同的,但是用法截然...

    2017-08-31 16:39
    222
  • STORM入门之(Worker、Executor、Task之间的关系)

    storm中worker、executor、task之间的关系 理清一下worker、executor、task、supervisor、nimbus、zk这几个之间的关系 先来看一张图   ...

    2017-08-28 10:15
    109
  • STORM入门之(Flume Kafka集成架构)

    Flume Flume作用:收集日志 组件下载地址:http://archive.apache.org/dist/flume/1.6.0/  版本:1.6.0以上集成Kafka Flume配置...

    2017-08-25 17:01
    311
  • STORM入门之(集成Redis)

    首先需要Redis工具类,自己写了一个简易的源码地址:http://blog.csdn.net/yl3395017/article/details/76172598 测试数据 KEY:test  V...

    2017-08-23 15:05
    517
  • STORM入门之(集成ElasticSearch)

    本片文章基于本专题Demo进行 传送门:http://blog.csdn.net/column/details/17004.html 由于Storm集成ES过于陈旧,所以会照成连接ES客户端抛出nod...

    2017-08-23 09:26
    750
  • STORM入门之(基本Shell命令)

    动态设置拓扑的并发度  Storm支持在不重启topology的情况下,动态的改变(增减)worker process的数目和executor的数目,称为rebalancing。有两种方式可以实现拓扑...

    2017-06-26 08:45
    196
  • STORM入门之(Stream Groupings分组方式)

    Stream Groupings Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型 1. 随机分组(Shuffle ...

    2017-08-02 15:42
    96
  • STORM入门之(Topology简易Demo)

    maven配置 org.apache.storm storm-core 1.0.0 Topology package com.storm.topology; impor...

    2017-08-21 14:24
    144
  • STORM入门之(集成KafkaBolt)

    根据第一篇文章:STORM入门之(Topology简易Demo)进行扩展集成Kafka STORM入门之(集成KAFKA)传送门:http://blog.csdn.net/yl3395017/arti...

    2017-08-21 17:11
    124
  • STORM入门之(集成KafkaSpout)

    此篇基于原有两篇文章基础上扩展 STORM入门之(集成KafkaBolt) 传送门:http://blog.csdn.net/yl3395017/article/details/77452604 ...

    2017-08-22 11:17
    248
img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部