kafka web console安装

此文章参考了

http://blog.csdn.net/wuzhilon88/article/details/46300447

http://blog.csdn.net/hengyunabc/article/details/40431627

感谢两位大神提供的资源帮助

Kafka Web Console是kafka的开源web监控程序.
功能介绍如下:
brokers列表
连接kafka的zk集群列表
所有topic列表，操作相应topic可以浏览查看相应message生产和消费流量图.

1、准备

安装sbt

linux手动安装sbt过程

1.下载Kafka Web Console

https://github.com/claudemamo/kafka-web-console

2.解压到/opt下

$ unzip kafka-web-console-master.zip
$ cd kafka-web-console

3.修改build.sbt文件支持mysql

1. ......
   
2. libraryDependencies ++= Seq(
   
3.   jdbc,
   
4.   cache,
   
5.   "org.squeryl" % "squeryl_2.10" % "0.9.5-6",
   
6.   "com.twitter" % "util-zk_2.10" % "6.11.0",
   
7.   "com.twitter" % "finagle-core_2.10" % "6.15.0",
   
8.   "org.apache.kafka" % "kafka_2.10" % "0.8.1",
   
9.   "org.quartz-scheduler" % "quartz" % "2.2.1",
   
10.   "mysql" % "mysql-connector-java" % "5.1.9"
    
11.     exclude("javax.jms", "jms")
    
12.     exclude("com.sun.jdmk", "jmxtools")
    
13.     exclude("com.sun.jmx", "jmxri")
    
14. )
    
15. .......

4.配置mysql的jdbc驱动

$  vi conf/application.conf

1. .......  
   
2. db.default.driver=com.mysql.jdbc.Driver  
   
3. db.default.url="jdbc:mysql://192.168.2.105:3306/mafka?useUnicode=true&characterEncoding=UTF8&connectTimeout=5000&socketTimeout=10000"  
   
4. db.default.user=xxx  
   
5. db.default.password=xxx  
   
6. ....... 
   

5.执行sql语句初始化数据库

6.编译

1. root@localhost:~$ sbt package

打包编译时会从官网上下载很多jar，由于网络原因，所以很慢，需要耐心等待。
注意:下载的jar是隐藏的，在cd  ~/.ivy2 目录(相应子目录)下可以看到所有jar.
ivy2所有jar包百度云下载http://pan.baidu.com/s/1nuWhqxr

1. root@localhost:~$ sbt run

也可以打包后期运行方便

$ sbt dist  这个命令生成可以发布的包，在../target/universal目录下。 

解压

1. unzip kafka-web-console-2.1.0-SNAPSHOT.zip  
2. cd kafka-web-console-2.1.0-SNAPSHOT/bin 
   

在编译的过程中，可能会出现有些依赖包无法下载，如下错误：

查看源代码 打印 帮助

01	[warn] module not found: com.typesafe.play#sbt-plugin;2.2.1

02	[warn] ==== typesafe-ivy-releases: tried

03	[warn] http://repo.typesafe.com/typesafe/ivy-releases/

04	com.typesafe.play/sbt-plugin/scala_2.9.2/sbt_0.12/2.2.1/ivys/ivy.xml

05	[warn] ==== sbt-plugin-releases: tried

06	[warn] http://scalasbt.artifactoryonline.com/scalasbt/sbt-plugin-releases/

07	com.typesafe.play/sbt-plugin/scala_2.9.2/sbt_0.12/2.2.1/ivys/ivy.xml

08	[warn] ==== local: tried

09	[warn] /home/iteblog/.ivy2/local/com.typesafe.play/

10	sbt-plugin/scala_2.9.2/sbt_0.12/2.2.1/ivys/ivy.xml

11	[warn] ==== Typesafe repository: tried

12	[warn] http://repo.typesafe.com/typesafe/releases/com/

13	typesafe/play/sbt-plugin_2.9.2_0.12/2.2.1/sbt-plugin-2.2.1.pom

14	[warn] ==== public: tried

15	[warn] http://repo1.maven.org/maven2/com/typesafe/play/

16	sbt-plugin_2.9.2_0.12/2.2.1/sbt-plugin-2.2.1.pom

17	[warn] ::::::::::::::::::::::::::::::::::::::::::::::

18

19	==== local: tried

20

21	/home/iteblog/.ivy2/local/org.scala-sbt/collections/0.13.0/jars/collections.jar

22

23	::::::::::::::::::::::::::::::::::::::::::::::

24

25	:: FAILED DOWNLOADS ::

26

27	:: ^ see resolution messages for details ^ ::

28

29	::::::::::::::::::::::::::::::::::::::::::::::

30

31	:: org.scala-sbt#collections;0.13.0!collections.jar

32

33	::::::::::::::::::::::::::::::::::::::::::::::

　　我们可以手动地下载相关依赖，并放到类似/home/iteblog/.ivy2/local/org.scala-sbt/collections/0.13.0/jars/目录下面。然后再编译就可以了。

第一次启动时要加个参数：

[plain] view plain copy

1. ./kafka-web-console -DapplyEvolutions.default=true   

不然会报错：

[java] view plain copy

1. [warn] play - Run with -DapplyEvolutions.default=true if you want to run them automatically (be careful)  
2. Oops, cannot start the server.  
3. @6k1jkg3be: Database 'default' needs evolution!  
4. at play.api.db.evolutions.EvolutionsPlugin$$anonfun$onStart$1$$anonfun$apply$1.apply$mcV$sp(Evolutions.scala:484)  

​查看帮助 和 后台运行：

[plain] view plain copy

1. ./kafka-web-console -h  
2. nohup ./kafka-web-console >/dev/null 2>&1 & 
   

注意：这里如果访问不成功 在打包的文件夹或者编译的文件夹里删除三个sql脚本即可