forrest_ou的博客

I hear and I forget , I see and I remenber , I do and I understand

过去的2017

以时间戳划分大年初一 --- 正月十六    过年耍。初中的老基友结婚,好幸福!正月十七 --- 五月一号    品高实习,我已经回想不起来我做了写啥,翻翻博客和照片找到一些记忆,不深刻。五月一号 --- 七月四号    回学校答辩,拍毕业照,做毕业都做的事,青春散场,说散就散七月四号 --- 二...

2018-02-09 17:13:04

阅读数 190

评论数 0

kafka数据量快速循环增加删除问题

问题现象 1、监控观察一个主题数据量的变化,数据量会持续增加然后删除减少,然后再持续增加然后再删除减少,一直循环 2、观察日志:rolled......  scheduling......  deleting.......  也是这样对一个主题一直循环 原因解释 首...

2018-01-30 17:21:08

阅读数 272

评论数 0

kafka扩容和分区重新分配

扩容:增加机器,例如原来三台服务器的kafka集群增加两台机器成为有五台机器的kafka集群,跟搭建差不多 分区重新分配:在原来机器上的主题分区不会自动均衡到新的机器,需要使用分区重新分配工具来均衡均衡 重新分配官方文档地址:点击打开链接 翻译官方文档中文地址:点击打开链接 ...

2018-01-23 17:32:57

阅读数 7745

评论数 0

mirrormaker(2)---权限问题和白名单

kafka版本:confluent-3.1.2 权限:SASL mirrormaker基础:    点击打开链接 一、权限问题 如果集群配置了权限,mirrormaker的成功运行需要有两个权限。 1、被mirror的源集群的消费权限 2、mirror目的地的目标集群的...

2018-01-23 16:16:57

阅读数 316

评论数 0

kafka删除主题数据和删除主题

kafka使用confluent-3.1.2      删除的主题名:test 1、删除主题 在server.properties中增加设置,默认未开启 delete.topic.enable=true删除主题命令 /bin/kafka-topics --delete --topic te...

2018-01-08 10:34:26

阅读数 5101

评论数 0

mirrormaker

概述 Mirroring data between clusters (Source Cluster  --->  Destination Cluster) 就是通过使用kafka自带的mirror-maker工具把一个集群里的主题cp到另外一个kafka集群中,使用场景:1、数...

2018-01-05 17:03:39

阅读数 473

评论数 0

通过时间戳查询指定分区的offsets

*** 使用的方法(offsetsForTimes()): Properties props = new Properties(); KafkaConsumer consumer = new KafkaConsumer<>(props); java.util.Map partit...

2018-01-05 15:38:55

阅读数 2006

评论数 1

kafka新建主题指定副本分布

kafka使用confluent-3.1.2 kafka新建topic , kafka决定副本分布 bin/kafka-topics --create --topic test001 --zookeeper localhost:2181 --replication-factor 3 --par...

2018-01-04 18:04:26

阅读数 1079

评论数 0

linux hostname立即永久生效+SSH免密登录

系统版本:CentOS6.5 lsb_release -a //查看版本信息 hostname立即永久生效 方法一: hostname newHostname //临时生效 vi /etc/sysconfig/network //重启后生效 //两者同时使用就满足...

2018-01-04 17:33:42

阅读数 1351

评论数 0

搭建kafka

kafka搭建

2017-09-27 18:38:02

阅读数 143

评论数 0

搭建hadoop

搭建hadoop

2017-09-27 18:34:56

阅读数 96

评论数 0

Windows ZIP安装MySQL

Windows ZIP安装MySQL

2017-09-27 18:26:36

阅读数 169

评论数 0

常用linux命令实战

常用linux命令,实践总结

2017-09-27 18:22:43

阅读数 141

评论数 0

IDEA导入多个项目jar包和符号不存在问题

2017-08-24 19:16:30

阅读数 1223

评论数 0

工作便签1

工作便签一

2017-04-06 17:26:35

阅读数 1198

评论数 0

linux安装配置xwiki

linux安装配置xwiki

2017-03-29 20:08:31

阅读数 4038

评论数 1

dokuwiki的安装配置,基于apache

dokuwiki的安装配置,基于apache

2017-03-07 21:46:22

阅读数 17834

评论数 0

Linux安装php-7.0.16,完成php和apache的配置

Linux安装php-7.0.16,完成php和apache的配置

2017-03-07 21:27:16

阅读数 10530

评论数 0

linux安装apache

使用ssh连接远程linux安装apache-2.4.25

2017-03-07 17:02:19

阅读数 2439

评论数 0

intellij idea注册码问题

解决intellij idea安装过程中注册码的问题,解决用一段时间后打开会出现your license has expired的弹窗需要注册码的问题

2017-02-27 15:34:20

阅读数 1626

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭