kafka安装和跨局域网连接配置

时间:2024-03-15 12:49:55

**

kafka安装和跨局域网连接配置

一、安装JAVA JDK
http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
需要配置环境变量java_home
name: JAVA_HOME
value: jdk主目录位置
然后把javahome放在path中
增加一个
path: %JAVA_HOME%\jre\bin

二:安装ZooKeeper
1、 下载安装包

http://zookeeper.apache.org/releases.html#download

2、 解压并进入ZooKeeper目录,如:D:\Kafka\zookeeper-3.4.9\conf

3、 将“zoo_sample.cfg”重命名为“zoo.cfg”

4、 打开“zoo.cfg”找到并编辑dataDir=D:\Kafka\zookeeper-3.4.9\tmp(必须以\分割)

5、 添加系统变量:ZOOKEEPER_HOME=D:\Kafka\zookeeper-3.4.9

6、 编辑path系统变量,添加路径:%ZOOKEEPER_HOME%\bin

7、 在zoo.cfg文件中修改默认的Zookeeper端口(默认端口2181)

8、 打开新的cmd,输入“zkServer“,运行Zookeeper

9、 命令行提示如下:说明本地Zookeeper启动成功

kafka安装和跨局域网连接配置
出现0.0.0.0/0.0.0.0:2181这种就是成功

三、安装Kafka
1、 下载安装包

http://kafka.apache.org/downloads

注意要下载二进制版本

2、 解压并进入Kafka目录,笔者:D:\Kafka\kafka_2.12-0.11.0.0

3、 进入config目录找到文件server.properties并打开

4、 找到并编辑log.dirs=D:\Kafka\kafka_2.12-0.11.0.0\kafka-logs

5、 找到并编辑zookeeper.connect=localhost:2181

6、 Kafka会按照默认,在9092端口上运行,并连接zookeeper的默认端口:2181

7、 进入Kafka安装目录D:\Kafka\kafka_2.12-0.11.0.0,按下Shift+右键,选择“打开命令窗口”选项,打开命令行,输入:

.\bin\windows\kafka-server-start.bat .\config\server.properties
或bin\kafka-server-start.sh config\server.properties

注意:注意:不要关了这个窗口,启用Kafka前请确保ZooKeeper实例已经准备好并开始运行

**

具体命令:

1.启动zooKeeper 命令:zkServer
2.启动kafka 命令E:\kafka\kafka_2.13-2.6.0>.\bin\windows\kafka-server-start.bat .\config\server.properties
3.创建topic
E:\kafka\kafka_2.13-2.6.0>.\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
4.查看生产者
E:\kafka\kafka_2.13-2.6.0>.\bin\windows\kafka-topics.bat --list --zookeeper localhost:2181
5.生产内容
E:\kafka\kafka_2.13-2.6.0>.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test

6.创建消费者
E:\kafka\kafka_2.13-2.6.0>.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning
**
**

跨局域网配置:

**
在正常安装测试完成之后
只需要在kafka的server.properties中解除注释
listeners=PLAINTEXT://:9092
advertised.listeners=PLAINTEXT://xx.xx.xx.xx:9092
这里修改为公网ip就可以