CentOS 7.4快速部署Kafka与Zookeeper教程

在本篇指南中，我们将详细步骤地指导如何在CentOS 7.4操作系统上安装Apache Kafka。首先，为了确保系统的稳定性和通信的顺畅性，我们需关闭防火墙并禁用SELinux： 1. 关闭防火墙：通过运行`systemctl stop firewalld.service` 和 `systemctl disable firewalld.service`来停止并永久禁用防火墙服务，以便Kafka可以正常监听端口。 2. 禁用SELinux：编辑`/etc/selinux/config` 文件，将`SELINUX` 设置为`disabled`，以解除SELinux对Kafka的限制。 接着，我们需要保持系统的更新并安装Java Development Kit (JDK)： 3. 更新系统：通过`yum install -y epel-release`安装额外的包存储库，然后使用`yum update -y`确保系统是最新的。这是因为Kafka依赖于JDK，而Oracle JDK的官方下载链接为：<https://www.oracle.com/java/technologies/javase/javase-jdk8-downloads.html>。 4. 安装JDK：根据操作系统选择合适的JDK版本（这里是x64版本），下载并安装，如`yum localinstall jdk-8u271-linux-x64.rpm`。确认安装后，可以通过`java-version`命令检查Java版本。 5. 配置Java环境变量：定位到Java安装目录，例如`/usr/java/jdk1.8.0_271-amd64`，然后修改`/etc/profile`，添加相关的JAVA_HOME、CLASSPATH和PATH变量，最后通过`source /etc/profile`使更改生效。 然后，我们开始安装Kafka： 6. 安装Kafka：首先下载kafka_2.12-2.4.1.tgz文件，解压至`/opt/`目录，重命名并配置环境变量`KAFKA_HOME`和`PATH`。 接下来，安装Zookeeper： 7. 安装Zookeeper：访问Apache ZooKeeper的官方网站下载zookeeper-3.4.14.tar.gz，解压文件，并将其放置在一个合适的目录下。 至此，我们已经完成了CentOS 7.4上Kafka的基本安装和配置。为了使Zookeeper成为服务，我们还需要： 8. 配置Zookeeper为服务：确保Zookeeper的可执行文件在PATH中，并将其设置为系统服务，以便在系统启动时自动运行。 9. 测试Kafka：安装完成后，可以通过运行Kafka和Zookeeper的命令进行初步测试，确保它们能够正确连接和交互。 10. 启动服务：分别使用`systemctl start zookeeper`和`systemctl start kafka` 启动Kafka和Zookeeper服务。 11. 监控与管理：安装完成后，你可以通过命令行工具或图形界面工具来监控和管理Kafka和Zookeeper，例如`kafka-topics.sh --describe`查看主题信息等。 总结来说，这篇指南详细介绍了在CentOS 7.4环境中安装Kafka的全过程，包括防火墙和SELinux的调整，JDK的安装与配置，以及Kafka和Zookeeper的安装、配置和服务启动。这对于希望在该系统上部署Kafka集群的用户来说，是一份实用的指南。