- 博客(11)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 graphite
yum install -y nc#创建生成模拟数据的脚本vi feed_random_data.sh#!/bin/bash# Generate random pageview data and feed Graphitetree_path=metrics.random.pageviewtime_period_hours=24now_timestamp=$(date +
2017-04-26 20:07:26
416
转载 es 分页两种方法
Elasticsearch——分页查询From&Size VS scrollElasticsearch中数据都存储在分片中，当执行搜索时每个分片独立搜索后，数据再经过整合返回。那么，如果要实现分页查询该怎么办呢？更多内容参考Elasticsearch资料汇总按照一般的查询流程来说，如果我想查询前10条数据：1 客户端请求发给某个节点2 节点转发给
2017-04-18 18:11:14
17861
1
原创 bolt BaseBasicBolt BaseRichBolt
baseBasicBolt 自带ack 机制下面是BasicBoltExecutor的一段源码，如果你写的bolt跑出FailedException 异常，basicBolt会调用fail,如果处理成功，会调用ack方法public void execute(Tuple input) { _collector.setContext(input); try {
2017-04-16 16:21:28
965
转载 storm ack
Storm的ack机制在项目应用中的坑正在学习storm的大兄弟们，我又来传道授业解惑了，是不是觉得自己会用ack了。好吧，那就让我开始啪啪打你们脸吧。先说一下ACK机制： 为了保证数据能正确的被处理, 对于spout产生的每一个tuple, storm都会进行跟踪。 这里面涉及到ack/fail的处理，如果一个tuple处理成功是指这个Tuple以及这个Tuple产生的所有Tuple都被成功
2017-04-14 21:13:21
597
原创 storm 可靠性
work --Executor--taskstorm 启动一个topology后，启动work，work的信息存在zookeeper里，这个时候，不管是nimbus还是supervisor挂掉了，都不影响work的正常运行。运行过程中如果一个work挂掉了，storm检测不到work的心跳，这时候storm会重新在启动一个work
2017-04-13 22:20:54
394
原创 kafka问题
org.apache.kafka.common.security.JaasUtils找不到这个类这是kafka版本问题，kafka0.8及以下是没有的kafka0.9.0.1有
2017-04-10 20:55:08
409
转载 elasticSearch 时间类型
Elasticsearch Date类型使用技巧作者: rockybean 时间: February 27, 2015 分类: 技术elasticsearch原生支持date类型，结合该类型和Kibana可以做出漂亮有用的图表。这里简单记录下使用的方法。使用date类型可以用如下两种方式：使用毫秒的时间戳，直接将毫秒值传入即可。传入格式化的字符串
2017-04-10 17:07:22
12861
转载 storm 连kafka报错
问题： KeeperErrorCode = NoNode for /brokers/topics/test3/partitions at org.apache.storm.kafka.DynamicBrokersReader.getBrokerInfo(DynamicBrokersReader.java:100)原因：KeeperErrorCode = NoNode for /brok
2017-04-06 14:26:29
1484
转载 storm 问题
Unable to access file:///log4j2/cluster.xml java.io.FileNotFoundException2016-12-13Storm 0.10.2 启动的时候日志配置出错ERROR StatusLogger Invalid URL C:/Users/xyzabc/apache-storm-0.10.0-beta/log4j2/
2017-04-01 13:53:49
2407
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人