设为首页 加入收藏

TOP

Kafka环境安装及配置_学习记录
2019-04-18 14:27:58 】 浏览:76
Tags:Kafka 环境 安装 配置 学习 记录

内容小白,包含JDK+Zookeeper+Kafka三部分。

原文链接https://blog.csdn.net/hupoling/article/details/75577167

JDK:

1) 安装包:Java SE Development Kit 9.0.1

下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk9-downloads-3848520.html

2) 配置环境:(与之前版本设置有差异)

3) 打开Dos界面,运行java:

4) 运行javac:

5) 配置完成。

Zookeeper:

1) 建议下载稳定版。

下载地址:http://mirrors.hust.edu.cn/apache/zookeeper/

2) 下载后解压到一个目录:eg: D:\Java\Tool\zookeeper-3.4.10

3) 在zookeeper-3.4.10目录下,新建文件夹,并命名(eg: data).(路径为:D:\Java\Tool\zookeeper-3.4.10\conf\data)

4) 进入Zookeeper设置目录,eg: D:\Java\Tool\zookeeper-3.4.10\conf

复制“zoo_sample.cfg”副本à并将副本重命名为“zoo.cfg”

在任意文本编辑器(eg:记事本)中打开zoo.cfg

找到并编辑dataDir=D:\\Java\\Tool\\zookeeper-3.4.10\\data

5) 添加系统环境变量:

在系统变量中添加ZOOKEEPER_HOME = D:\Java\Tool\zookeeper-3.4.10

编辑path系统变量,添加为路径%ZOOKEEPER_HOME%\bin

6) 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

7) Dos下运行:zkserver

8) 搭建成功。

Kafka:

1) 安装包:kafka_2.12-1.0.0.tgz

下载地址:http://kafka.apache.org/downloads.html

推荐版本:kafka_2.12-1.0.0.tgz

2) 下载后解压缩。eg:D:\Tools\kafka_2.11-1.0.0\

3) 建立一个空文件夹 logs.eg: D:\Tools\kafka_2.11-1.0.0\logs

4) 进入config目录,编辑 server.properties文件(eg: 用“写字板”打开)。

找到并编辑log.dirs= D:\\Tools\\kafka_2.11-1.0.0\\logs

找到并编辑zookeeper.connect=localhost:2181。表示本地运行。

(Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181)

运行:请确保在启动Kafka服务器前,Zookeeper实例已经准备好并开始运行。(就是开着Zookeeper窗口不要关)

1) 在 D:\WorkSoftware\kafka_2.11-1.0.0下,按住shift+鼠标右键。

选择“在此处打开Powershell窗口(S)”(如果没有此选项,在此处打开命令窗口)。

2) 运行:.\bin\windows\kafka-server-start.bat .\config\server.properties

3) 可能会报错:“找不到或无法加载主类 Files\java\jdk-9.0.1\lib;C:\Program”

4) 解决(3)的办法:

在kafka安装目录中找到bin\windows目录中的kafka-run-class.bat为%CLASSPATH%加上双引号(可用Matlab打开,并进行搜索)

修改前:setCOMMAND=%JAVA%%KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS%%KAFKA_LOG4J_OPTS% -cp%CLASSPATH%%KAFKA_OPTS% %*

修改后:SetCOMMAND=%JAVA%%KAFKA_HEAP_OPTS% %KAFKA_JVM_PERFORMANCE_OPTS% %KAFKA_JMX_OPTS%%KAFKA_LOG4J_OPTS% -cp"%CLASSPATH%"%KAFKA_OPTS% %*

5) 再次运行:.\bin\windows\kafka-server-start.bat.\config\server.properties

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇大数据实战之Logstash采集->Ka.. 下一篇Kafaka集群安装部署

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目