Kafka -- 0.10.0.1 之 源码编译

最新推荐文章于 2024-03-30 09:59:13 发布
最新推荐文章于 2024-03-30 09:59:13 发布
阅读量1k 收藏
点赞数
分类专栏： Kafka 文章标签： Kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_37039331/article/details/86323531
版权
本文介绍了如何编译Kafka 0.10.0.1源码，详细描述了在源码目录下使用gradle idea遇到的问题及解决方法，包括在build.gradle中添加特定配置以解决Scala编译问题。编译完成后，通过二进制包中的kafka-topics.sh脚本创建并验证主题test001。
摘要由CSDN通过智能技术生成

在源码目录下运行 gradle idea。

遇到的问题：

  • What went wrong:
    A problem occurred evaluating root project ‘kafka-0.10.0.1-src’.

Failed to apply plugin [class ‘org.gradle.api.plugins.scala.ScalaBasePlugin’]
No such property: useAnt for class: org.gradle.api.tasks.scala.ScalaCompileOptions

需要在build.gradle开头加入：

ScalaCompileOptions.metaClass.daemonServer = true
ScalaCompileOptions.metaClass.fork = true
ScalaCompileOptions.metaClass.useAnt = false
ScalaCompileOptions.metaClass.useCompileDaemon = false

然后构建完成

acc

启动：
在这里插入图片描述

验证
然后用kafka二进制包（注意是下载的二进制包，而不是源码包）中自带的脚本收发消息进行验证。

kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test001

最低0.47元/天 解锁文章
【Kafka】编译 Kafka 源码并搭建源码环
石臻臻的杂货铺(szzdzhp001)
02-16 2261
搭建源码环境可以看这篇文章： 编译 Kafka 源码并搭建源码环境 上面有个地方注意,启动的时候,可以传入VM参数来指定 kafka.log.dir 路径(存放各种日志的路径) -Dkafka.logs.dir=/Users/shirenchuang/work/IdeaPj/open_source/kafka/logs 按照上面的方法搭建并成功启动了Kafka, 那么当我们想要启动集群怎么办呢？ IDEA同时启动多个Kafka 配置多个server.properties, 例如server1.pro
30-10-010-编译-IDEA下编译kafka 2.3源码
九师兄
01-06 240
1.视界 2.瞎蒙的编译 https://blog.csdn.net/qq_21383435/article/details/90971614 编译跳过测试 gradle build -x test 编译没有修改的编译成功过。 但是后来添加了注释就编译总是出现问题。 3.编译 下载源码，源码里面自带了一个gradlew的编译脚本： 下载地址：github 下载自己需要的版本，我这里下载2.3版本为例 3.1下载wrapper包 导入IDEA, 源码根目录下执行：gradle wrapper 会下载w
Apache Kafka-0.8.1.1源码编译
好读书，每有会意，便欣然忘食。
12-09 1306
经过近一个月时间，终于差不多将之前在Flume 0.9.4上面编写的source、sink等插件迁移到Flume-ng 1.5.0，包括了将Flume 0.9.4上面的TailSource、TailDirSource等插件的迁移（当然，我们加入了许多新的功能，比如故障恢复、日志的断点续传、按块发送日志以及每个一定的时间轮询发送日志而不是等一个日志发送完才发送另外一个日志）。现在我们需要将Flu
kafka源码编译
weixin_33778544的博客
11-27 268
前言 github网站kafka项目的README.md有关于kafka源码编译的说明 github地址：https://github.com/apache/kafka 编译环境准备 java maven gradle 编译   失败原因：gradle版本太高，降低到4.8就ok了  编译（执行如下命令） 会在kafka/core/build/distributions目录下生成需要的ta...
Kafka源码编译
梁海江的博客
11-24 2592
1. 环境准备 kafka源码编译需要依赖gradle与scale，所以在编译kafka源码之前需要安装配置爱gradle与scala环境。下表是各个环境安装的版本及下载地址，当然还需要jdk8,这里不做详细说明。 序号 软件 版本 下载地址 1 gradle 5.5 点击下载-gradle_5.5 2 scala 2.11.xx（2.11.12） 点击下载-scala-2.11.12 3 kafka 2.1.0 点击下载-kafka_2.1.0 2. 环境安装 这里安装按照正常
Kafka 源码编译
Horace Ho的博客
02-25 1908
环境准备 JDK1.7 or higher（建议使用 JDK 1.8） 软件准备 scala-2.11.12.zip 下载地址：https://www.scala-lang.org/download/2.11.12.html gradle-4.8.1-bin.zip（写本文的时候gradle最新版是4.8.1） 下载地址：https://gradle.org/releases/ 下载bina...
kafka-0.10.0.1-src:通过IntelliJ IDEA编译过的kafka源码-源码通
03-24
《深入理解Kafka 0.10.0.1源码——基于IntelliJ IDEA编译》 在当今大数据时代，消息队列作为数据传输的关键组件，Apache Kafka因其高性能、高吞吐量以及分布式特性而备受青睐。本文将聚焦于Kafka 0.10.0.1版本的...
Apache Spark源码阅读环境搭建
终回首的博客
08-26 714
文章目录1 下载源码2 导入项目3 新建文件4 Debug JavaWordCount遇到的报错1 未设置Master2 模块编译输出路径冲突 版本 win7 jdk 1.8 maven 3.6.3 scala 2.11.8 1 下载源码 # 下载源码 git clone https://github.com/apache/spark.git # 切换到目标版本 git checkout v2.4.0 2 导入项目 #mermaid-svg-iY0oiuQsBRWr905j .label{font-fam
Fabric学习--环境搭建
chendygame的博客
09-24 2800
1、准备工作 1.1安装环境 win10/VMware® Workstation 15 Pro/Centos8.2 1.2 虚拟机配置 网络：NAT模式 , 其他视情况而定； 1.3 环境检查 ping通网络； 开启虚拟机 启动xshell登录系统 1.4 用户配置 建立一个管理员用户fabric。 2、安装步骤 2.1安装wget 因为需要管理员权限，所以要用sudo授权执行此命令。 sudo yum -y install wget 2.2安装go 2.2.1下载go.
1.kafka源码编译
flying roc
06-26 731
kafka源码编译 1.准备环境 1.java环境 检查java版本，1.8 java -version 2.scala环境 检查scala版本，2.11.8 scala -version 3.gradle环境 检查gradle版本 gradle -version gradle各版本下载地址 4.kafka kafka各版本下载地址 这里下载0.11.3，gradle版本也要选择低版本，4.10.2可以编译成功，5.6,6.8都编译失败 2.编译kafka 解压kafka-0.11.0.3-src.
kafka-0.10.1.0-src.tgz
08-20
kafka-0.10.1.0-src.tgz
kafka-1.0.0-src.tar
03-21
Kafka 通过系统解耦、Partition（分片存储）、复制备份、持久化、缓存、集群和异步通信等策略提供了一个高性能、高可靠、可扩展的数据管道和消息系统。
kafka源码解读之（一）源码编译
qq_24186017的博客
07-22 236
kafka源码版本：0.10.1 scala版本：2.10.6 java版本：1.8 gradle版本：5.x 1.将build.gradle中maven换成aliyun buildscript { repositories { // mavenCentral() maven{ url 'http://maven.aliyun.com/nexus/content/groups/public/'} jcenter() } 将dependecies中org,sco
kafka源码_Kafka源码阅读之编译
weixin_39669761的博客
12-03 75
我们经常会在Java或者大数据的面试中问到Kafka的知识，我们经常的回答只知其然而不知其所以然，现在我打算写一个如何从源码的角度去回答这些知识点的一系列文章，今天先把阅读源码的环境先准备好，有兴趣的小伙伴可以关注以及讨论学习。环境准备JDK 1.8+MavenScala 2.11.8IDEA以及Scala 插件下载源码下载 github地址：https://github.com/apache/k...
(一)kafka实战——kafka源码编译启动
最新发布
厉害哥哥的博客
03-30 2577
本节内容是关于kafka消息中间键的源码编译，并通过idea工具实现kafka服务器的启动，使用的kafka源码版本是3.6.1，由于kafka源码是通过gradle编译的，以及服务器是通过scala语言实现，我们要预先安装好gradle编译工具和scala环境，同时需要安装scala依赖的java环境jdk17。
kafka源码编译准备
moke的博客
12-27 1029
以我自己编译kafka为例。 gradle5.2 java8 scala2.12.12 kafka2.11.0 idea社区版 一、拉取kafka源码 找到一个空文件夹，拉取kafka源码。例D:\yh\SourceCode 打开cmd，执行如下命令： git clone https://github.com/apache/kafka.git ## 切换到kafka0.11.0分支 git checkout 0.11.0 二、安装gradle并编译kafka源码 配置gradle，新增用户变量
聊聊 Kafka：编译 Kafka 源码并搭建源码环境
mxy2404830的博客
12-16 942
一、前言 老周这里编译 Kafka 的版本是 2.7，为啥采用这个版本来搭建源码的阅读环境呢？因为该版本相对来说比较新。而我为啥不用 2.7 后的版本呢？比如 2.8，这是因为去掉了 ZooKeeper，还不太稳定，生产环境也不太建议使用，所以以 2.7 版本进行源码搭建并研究。 二、环境准备 JDK：1.8.0_241 Scala：2.12.8 Gradle：6.6 Zookeeper：3.4.14 三、环境搭建 3.1 JDK 环境搭建 这个就不用我说了吧
Kafka源码编译,将编译后源码导入Eclipse并启动
城北荆无命的博客
09-19 1158
目录 环境准备: 安装配置: Scala安装配置 1.下载scala 2.配置环境变量 Gradle安装配置 Kafka源码编译 1.源码下载 2.下载gradle的wrapper包 3.编译Kafka源码 Eclipse导入Kafka eclipse安装scala插件 导入kafka源码 启动配置 环境准备: JDK : jdk1.8.0_66(1.8...
【Kafka学习】Kafka-2.7 源码编译阅读
qq_34926773的博客
12-10 2047
Kafka 2.7 Idea源码编译阅读
适用于JDK7的Kafka 2.10-0.10.0.1版本分享
资源摘要信息:"kafka_2.10-0.10.0.1.rar" Apache Kafka是一个分布式的流处理平台，主要用于构建实时数据管道和流应用程序。Kafka被广泛用于两大类应用：构建实时的流数据管道，这些数据管道将各种源系统产生的实时...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值