- 博客(7)
- 资源 (16)
- 收藏
- 关注
RSS订阅转载 Kafka性能测试方法及Benchmark报告
本文转发自Jason’s Blog，原文链接 http://www.jasongj.com/2015/12/31/KafkaColumn5_kafka_benchmark摘要 本文主要介绍了如何利用Kafka自带的性能测试脚本及Kafka Manager测试Kafka的性能，以及如何使用Kafka Manager监控Kafka的工作状态，最后给出了Kafka的性能测试报告。
2016-03-31 12:02:56
11552
原创 flume实现kafka到hdfs实时数据采集 - 有负载均衡策略
方案:两台采集机器pc1,pc2.有两个写hdfs的sink,分别部署到两台机器,然后两个负载均衡的agent,也是分布部属到两台机器上,每一个agent都是写到两个hdfs sink的source端. 配置:*******************************************hdfs sinkhdfs-sink.sources = r1hdfs-sink.si...
2016-03-31 10:53:45
10936
转载 Kafka深度解析
原创文章，转载请务必将下面这段话置于文章开头处。 本文转发自Jason’s Blog，原文链接 http://www.jasongj.com/2015/01/02/Kafka深度解析背景介绍Kafka简介 Kafka是一种分布式的，基于发布/订阅的消息系统。主要设计目标如下：以时间复杂度为O(1)的方式提供消息持久化能力，即使对TB级以上数据也能保证常数
2016-03-30 10:04:26
6553
转载 Hive JSON数据处理的一点探索
背景 JSON是一种轻量级的数据格式，结构灵活，支持嵌套，非常易于人的阅读和编写，而且主流的编程语言都提供相应的框架或类库支持与JSON数据的交互，因此大量的系统使用JSON作为日志存储格式。 使用Hive分析数据（均指文本）之前，首先需要为待分析的数据建立一张数据表，然后才可以使用Hive SQL分析这张数据表的数据。这就涉及到我们如何把一行文本数据映射为数据表的列，常规的方式有
2016-03-16 19:03:14
7906
转载 系统吞吐量（TPS）、用户并发量、性能测试概念和公式
PS：下面是性能测试的主要概念和计算公式，记录下：一．系统吞度量要素： 一个系统的吞度量（承压能力）与request对CPU的消耗、外部接口、IO等等紧密关联。单个reqeust 对CPU消耗越高，外部系统接口、IO影响速度越慢，系统吞吐能力越低，反之越高。系统吞吐量几个重要参数：QPS（TPS）、并发数、响应时间 QPS（TPS）：每秒钟r
2016-03-02 19:05:56
7984
原创 大数据架构师之路-大数据解决方案大全
七牛是如何搞定每天500亿条日志的http://blog.qiniu.com/archives/3928
2016-03-02 17:57:21
20422
3
SonarLint-3.5-for-intellj-idea-亲测好使.zip
2019-08-09
C#语言c/结构酒店管理系统_幽灵工作室提供
2013-05-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人