windows环境下kafka源代码开发环境搭建

开发环境: Oracle Java  + Eclipse  + Scala + Gradle + Kafka 

1、Gradle安装配置

https://www.gradle.org/downloads/ 下载最新的Gradle版本。下载解压到一个目录,然后创建一个环境变量GRADLE_HOME指向解压的目录,再将%GRADLE_HOME%\bin加到PATH环境变量中,Gradle就安装配置好了。打开一个cmd输入gradle -v 验证一下:

2、kafka源代码下载

  安装好Gradle之后我们开始下载Kafka的源代码,当前最新的稳定版本是2.2.0,你可以从http://kafka.apache.org/downloads处下载源代码包。下载之后解压缩到一个目录,目录结构如下图所示:

重要目录的作用如下:

bin目录:       Windows和Unix平台下的执行脚本,比如kafka-server-start,console-producer,console-consumer等
clients目录:      Kafka客户端代码
config目录:       Kafka配置文件,其中比较重要的是server.properties,启动Kafka broker需要直接加载这个文件
core目录:         Kafka的核心代码
examples目录: Kafka样例代码,例如如何使用Java编写简单的producer和consumer
test:   系统测试脚本,主要用python编写
其他的目录和配置文件大多和gradle配置有关,就不赘述了。

3、下载gradle wrapper类库

因为源代码的gradle子目录中没有wrapper类库,因此我们要先安装一个Gradle Wrapper库,方法也很简单,打开个cmd窗口,在Kafka源代码根目录下执行gradle wrapper即可。你只需运行这个命令一次即可。如果是首次安装需要花一些时间去下载所需的jar包。Kafka的源代码是用Scala语言编写的,下图中清晰地显示我们使用Scala版本是2.12.8。你可以在gradle.properties文件中指定Scala版本。

命令运行成功之后,在kafka的gradle子目录中会多出一个wrapper子目录,里面包含了一个jar包和一个配置文件。至此Gradle wrapper已被成功安装在本机:

4.安装scala

 

 

5.生成Eclipse工程文件并导入到MyEclipse中

上述准备工作一切就绪后,我们现在可以生成Eclipse工程文件。具体做法为打开一个cmd窗口,切换到kafka源代码根路径下,运行gradlew eclipse,如果是第一次运行,可能会花费一些时间去下载必要的jar包,在等待了一段时间之后,终于看到了BUILD SUCCESSFUL的字样表示项目工程文件生成成功:

 看到成功后,说明gradle项目构建成功了,下面在myeclipse中导入项目

可以看到当前kafka版本中的主要工程

core工程就是最核心的kafka工程

 至此kafka源码已经成功导入到myeclipse中。

 

posted on 2019-05-14 10:31  forever_time  阅读(822)  评论(0编辑  收藏  举报