用eclispe来调试Kafka源代码

原创 2016年05月28日 09:52:51

我是看好Scala的,毕竟Kafka、Spark这两个大招太牛了,你想不用它都不行,所以Scala肯定会红火起来的!

看了2周的Scala了,Kafka也用了好几年了,终于可以把Kafka的源代码下下来,看看到底是何方圣神了!

环境:

Window 10

Scala 2.11.8

Eclipse mar2

JDK 1.8

gradle-2.13


Kafka:

kafka-0.8.2.0-src


话说就是一顿安装了,也没有什么太多东西。

gradle的安装比较简单,设置环境变量 :GRADLE_HOME=d:/dev/gradle-2.13 再把 %GRADLE_HOME%\bin加到PATH中去,就那么的完了,就更配置JDK一样一样的。

Scala的安装就不提了,但是不要忘记的是要在eclipse中安装好scala的插件,这个也很好办!


这其中最重要的莫过于修改:kafka-0.8.2.0-src/gradle.properties 这个配置文件了,要不会各种Scala版本错误和Java类路径错误,我是在这里吃亏了!

一定要把下面Scala的版本修改为当前使用的版本:

scalaVersion=2.11.8

改好这个之后就进入目录:kafka-0.8.2.0-src下执行 gradle eclipse就可以生成eclipse的工程了(网络不好,这个过程相对长些,可以喝水上厕所了),其它就是导入了,当然导入的时候,要选择已经存在的工程即可,再就是愉快的看看代码,想调试哪里就调试哪里啦!


呵呵,如果没把scala的版本和你环境一致的话,各种错误都会来,最后你肯定能够找到如下两个BUG(其实不是BUG):


https://issues.apache.org/jira/browse/KAFKA-1874

https://issues.apache.org/jira/browse/KAFKA-1873



Kafka源代码导入Scala IDE

折腾了一晚,终于在Scala IDE(Eclipse加Sacla插件了)下可以看Apache Kafka工程的源代码了。        我的环境是:win7 32位,Scala IDE:4.0.0...
  • xiucaiyao
  • xiucaiyao
  • 2014年12月30日 01:50
  • 3733

kafka 源码运行环境搭建

apache kafka 作为一款高吞吐量,分布式的消息中间件,在越来越多的互联网公司流行起来了,为了更好地熟悉和掌握kafka的运行原理和细节,可以搭建一套本地可运行的源码环境来熟悉kafka。 ...
  • rigete
  • rigete
  • 2015年11月05日 15:23
  • 2284

我的kafka JAVA调试代码

kafka 是很好的供所有分析库从生产库多次提取数据的中转库,特别是kafka 0.9后出现的kafka connect,个人认为能作为实时的ETL工具。 另外,kafka和storm都是流,但kaf...
  • fengyun14
  • fengyun14
  • 2016年06月23日 22:04
  • 994

kafka的安装和调试

1. 简介 kafka (官网地址:http://kafka.apache.org)是一款分布式消息发布和订阅的系统,具有高性能和高吞吐率。 i. 消息的发布(publish)称作...
  • yz7074998
  • yz7074998
  • 2015年03月13日 16:34
  • 1767

Kafka学习之源代码环境搭建(eclipse)

主要参考:https://cwiki.apache.org/confluence/display/KAFKA/Developer+Setup#DeveloperSetup-Eclipsesetup ...
  • damacheng
  • damacheng
  • 2015年01月04日 16:20
  • 3221

基于Kafka的生产者消费者消息处理本地调试

基于kafka的生产者消费者消息处理
  • qq_25827845
  • qq_25827845
  • 2017年03月29日 22:20
  • 2859

kafka调试常用命令

1、创建topic ./kafka-topics.sh --zookeeper 10.77.4.27:2181/kafka --create --topic z3dbus_search_test03...
  • xf_87
  • xf_87
  • 2017年07月10日 14:27
  • 165

Kafka消息保证不丢失

Kafka消息保证生产的信息不丢失和重复消费问题 1)使用同步模式的时候,有3种状态保证消息被安全生产,在配置为1(只保证写入leader成功)的话,如果刚好leader partition挂了,数...
  • john2522
  • john2522
  • 2017年03月21日 22:35
  • 5656

kafka 源码 导入eclipse中

转载自:http://mail-archives.apache.org/mod_mbox/kafka-users/201307.mbox/%3CCAFKhtFxGO1ZG-6kD0TZmmKaQ-J2...
  • myrainblues
  • myrainblues
  • 2014年05月07日 06:38
  • 3305

eclipse搭建kafka开发环境

下载源文件,包括源代码,和二进制版本的。以kafka-0.10.0.1为例 解压源代码,把源代码中的示例文件,大概路径是examples下,点到kafka时,直接点复制,把代码复制到eclipse中,...
  • qq_22222499
  • qq_22222499
  • 2017年06月05日 21:45
  • 683
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:用eclispe来调试Kafka源代码
举报原因:
原因补充:

(最多只允许输入30个字)