一、Kafka 集群安装

1、准备环境:Kafka 集群安装需要准备操作系统,Kafka 的安装包,Java JDK,Zookeeper 的安装包。

2、安装 Java JDK:在 Kafka 集群的每一台机器上安装 Java JDK,并配置环境变量,使用 java -version 检查安装是否成功。

3、安装 Zookeeper:解压 Zookeeper 的安装包,修改配置文件,配置每个节点的 ID,配置 Zookeeper 的服务端口,添加 Zookeeper 的启动脚本,启动 Zookeeper 服务。

4、安装 Kafka:解压 Kafka 的安装包,修改配置文件,配置 Kafka 的服务端口,添加 Kafka 的启动脚本,启动 Kafka 服务。

二、Kafka 集群配置

1、修改 Kafka 配置文件:修改 Kafka 的配置文件,配置 Kafka 集群中的每一台机器的 IP 地址,配置 Kafka 的服务端口,配置 Kafka 的日志目录,配置 Kafka 的数据目录,配置 Kafka 的分区数量。

2、修改 Zookeeper 配置文件:修改 Zookeeper 的配置文件,配置 Zookeeper 集群中的每一台机器的 IP 地址,配置 Zookeeper 的服务端口,配置 Zookeeper 的数据目录。

3、启动 Kafka 集群:启动 Kafka 集群中每一台机器上的 Kafka 服务,使用 bin/kafka-topics.sh --list --zookeeper localhost:2181 查看 Kafka 集群是否启动成功。

三、Kafka 集群测试

1、创建主题:使用 bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 3 --partitions 3 --topic test 创建测试主题,查看主题是否创建成功。

2、发送消息:使用 bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test 发送消息,查看消息是否发送成功。

3、消费消息:使用 bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning 消费消息,查看消息是否消费成功。