- 博客(4)
- 收藏
- 关注
原创 kafka的__consumer_offsets管理consumer
__consumer_offsets管理consumer说明: 公司的kafka(1.0.0)要清理一些过期的消费组。开始以为像旧版的kafka(好像是0.9.0.0及以后的是新版本)那样,topic和consumer都交给zookeeper保管,傻乎乎地通过shell命令查看: 上图的是我们通过shell命令直接消费topic时的consumer,不是生产中代码中的。原来新...
2019-09-10 17:04:08
1991
原创 spark on Yarn输出自定义日志
spark on Yarn输出自定义日志1、scala版2、java版说明: 生产中spark程序打包发布到Yarn集群上,运行日志在ResourceManager UI,找到自己的项目,点击ID进入,点击Logs查看。1、scala版依赖: <dependency> <groupId>org.apache.logging.lo...
2019-09-02 18:02:08
1745
原创 多线程并发工具类之Phaser
Phaser实例场景说明实例代码运行结果场景说明一批运动员参加一场比赛,比赛分为3个阶段:选手入场-开始比赛-比赛结束。所有的选手完成一个阶段后才能开始下个阶段,否则等待其他选手完成该阶段,比如所有选手入场后才能开始比赛。实例代码1、自定义Phaser类package java7.thread.chapter2.test1;import java.util.concurrent.Ph...
2019-08-14 16:29:07
144
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人