Kafka分布式集群部署

时间:2021-10-13 03:06:08

这个是kafka的官网地址:http://kafka.apache.org/

Kafka分布式集群部署

1、kafka是一个消息系统。

2、kafka对流数据可以高效的实时处理。

3、分布式集群的环境下能够保证数据的安全。

Kafka分布式集群部署

Kafka分布式集群部署

kafka的下载地址:http://kafka.apache.org/downloads

Kafka分布式集群部署

Kafka分布式集群部署

把安装包上传

Kafka分布式集群部署

Kafka分布式集群部署

把权限修改一下

Kafka分布式集群部署

解压

Kafka分布式集群部署

配置kafka

Kafka分布式集群部署

Kafka分布式集群部署

Kafka分布式集群部署

这个路径来自这里

Kafka分布式集群部署

配置zookeeper

Kafka分布式集群部署

把这里改成kafka所在节点的主机名

Kafka分布式集群部署

kafka的配置文件现在配置完了,把kafka分发到其他两台机器上

Kafka分布式集群部署

Kafka分布式集群部署

分发过去之后,把配置文件修改一下

Kafka分布式集群部署

Kafka分布式集群部署

第三台机器也是一样

Kafka分布式集群部署

Kafka分布式集群部署

启动kafka

先把三个节点的zookeeper服务启动,这里就不多说怎么启动zookeeper了,然后启动我们的kafka

Kafka分布式集群部署

创建topic

Kafka分布式集群部署

通过zookeeper查看topic是否创建成功

Kafka分布式集群部署

Kafka分布式集群部署

创建生产者

Kafka分布式集群部署

创建一个消费者

Kafka分布式集群部署

在生产者这边输入

Kafka分布式集群部署

消费者这边都拿到了

Kafka分布式集群部署

后面两台机器的kafka启动也是一样的

Kafka分布式集群部署

Kafka分布式集群部署