kafka学习总结(七)——kafka监控-kafkaOffsetMonitor

1、kafkaOffsetmonitor简述 KafkaOffsetMonitor是有由Kafka开源社区提供的一款Web管理界面,这个应用程序用来实时监控Kafka服务的Consumer以及它们所在的Partition中的Offset,你可以通过浏览当前的消费者组,并且每个Topic的所有Par...

2017-06-15 11:17:51

阅读数 1606

评论数 0

Kafka学习总结(三)——Kafka的message存储数据结构

引言 Kafka中的Message是以topic为基本单位组织的,不同的topic之间是相互独立的。每个topic又可以分成几个不同的partition(每个topic有几个partition是在创建topic时指定的),每个partition存储一部分Message。借用官方的一张图,可以直观...

2017-05-24 01:20:55

阅读数 4643

评论数 0

Kafka学习总结(一)——Kafka简介

1.1、什么是kafka?Kafka是由linkedin开发的一个分布式的(发布-订阅)消息系统,使用Scala编写,它以可水平扩展和高吞吐率而被广泛使用。 1.2、Kafka创建背景当今社会各种应用系统诸如商业、社交、搜索、浏览等像信息工厂一样不断的生产出各种信息,在大数据时代,我们面临如下几...

2017-05-22 10:49:42

阅读数 999

评论数 0

Kafka学习总结(六)——应用开发

1、开发一个生产者应用,如下:package com.cattsoft; import java.util.Properties; import kafka.javaapi.producer.Producer; import kafka.producer.KeyedMessage; import ...

2017-05-21 23:11:21

阅读数 518

评论数 0

Kafka学习总结(四)——broker、consumer、producer主要配置

1、Broker配置 2、Consumer主要配置 /指定zookeeper的连接的字符串/ props.put(“zookeeper.connect”,”130.60.23.193:2181,130.60.23.194:2181,130.60.23.195:2181”); props.p...

2017-05-21 22:22:19

阅读数 721

评论数 0

Kafka学习总结(二)——Kafka设计原理

2.1、kafka的场景和架构在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我想分析一下用户行为pageviews,以便我能设计出更好的广告位 我想对用户的搜索关键词进行统计,分析出当前的流行趋势。这个很有意思,在经济学上有个长裙理论,就是说,如果长裙的销量高了,说...

2017-05-21 18:02:05

阅读数 1430

评论数 0

Kafka学习总结(五)——Kafka集群搭建

详细的kafka集群搭建步骤

2016-11-30 22:59:12

阅读数 22019

评论数 13

jdbc连接oracle出现ORA-12505的解决办法

tomcat启动时,报错 引用 2008-01-22 14:11:53,312 ERROR main org.hibernate.util.JDBCExceptionReporter - Cannot create PoolableConnectionFactory (Io 异常: Conne...

2018-07-17 14:50:24

阅读数 574

评论数 0

工作中linux常用命令总结

1) ll命令  命令格式:ll   命令功能:列出目标目录中所有的子目录和文件 2) cd 命令  命令格式:cd  [目录名]  命令功能:切换当前目录至dirName  常用范例:cd /(进入系统根目录)、cd .. (进入当前目录的上级目录) 3) pwd命令  命令格式:p...

2017-11-22 23:07:32

阅读数 235

评论数 0

java中与运算,或运算,异或运算,取反运算

转自:http://www.cnblogs.com/ismileboy/p/7241567.html //与运算 &  规则 :都为1时才为1         System.out.println( 7 & 9);         /*          *  7二进制 0...

2017-10-12 10:16:29

阅读数 1079

评论数 0

linux环境,Tomcat 指定运行时 jdk的版本

1、进入tomcat运行bin目录 cd apache-tomcat-9.0.0.M26/bin2、修改catalina.sh,在文件开头空白处添加JAVA_HOME配置,如下 JAVA_HOME=/home/cattsoft/software/jdk1.8...

2017-08-18 11:36:08

阅读数 448

评论数 0

eclipse版本发布图

eclipse 各大版本对应

2017-04-21 16:56:28

阅读数 1017

评论数 0

Eclipse中jsp、js文件编辑时,卡死现象解决汇总

使用Eclipse编辑jsp、js文件时,经常出现卡死现象,在网上百度了N次,经过N次优化调整后,卡死现象逐步好转,具体那个方法起到作用,不太好讲。将所有用过的方法罗列如下:   1、取消验证 windows–>perferences–>validation 把...

2017-04-21 15:11:54

阅读数 492

评论数 0

RunTime.getRunTime().addShutdownHook 添加钩子

addShutdownHook 钩子程序

2017-04-10 17:57:06

阅读数 2500

评论数 0

java术语(PO/POJO/VO/BO/DAO/DTO)

转自:http://blog.csdn.net/gaoyunpeng/article/details/2093211 PO(persistant object) 持久对象 在o/r 映射的时候出现的概念,如果没有o/r映射,就没有这个概念存在了.通常对应数据模型(数据库),本身还有部分业务逻辑...

2017-04-10 17:30:28

阅读数 280

评论数 0

Oracle数据类型之number

oracle数据类型之number

2017-03-28 14:57:59

阅读数 261

评论数 0

Java BigDecimal详解

转自:http://blog.csdn.net/jackiehff/article/details/8582449 1.引言         借用《Effactive Java》这本书中的话,float和double类型的主要设计目标是为了科学计算和工程计算。他们执行二进制浮点运算...

2017-03-28 11:58:25

阅读数 359

评论数 0

oracle jdbc 分批抓取查询FetchSize(100)

当我们查询的表数据量比较大,几千万上亿的时候,就需要考虑分批抓取查询,模拟游标的方式,不然就会出现OOM。 setFetchSize:分批抓取查 缺省时,驱动程序一次从查询里获取所有的结果。这样可能对于大的数据集来说是不方便的, 因此 JDBC 驱动提供了一个用于设置从一个数据库游标抽取若...

2017-03-15 11:27:15

阅读数 4177

评论数 0

Kafka入门经典教程

问题导读1.Kafka独特设计在什么地方?2.Kafka如何搭建及创建topic、发送消息、消费消息?3.如何书写Kafka程序?4.数据传输的事务定义有哪三种?5.Kafka判断一个节点是否活着有哪两个条件?6.producer是否直接将数据发送到broker的leader(主节点)?7.Kaf...

2017-03-12 00:49:02

阅读数 412

评论数 0

solr6.3.0安装启动,以及core创建和导入数据

最新的solr版本,安装启动以及导入数据。

2017-03-09 10:57:54

阅读数 1561

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭