linux下kafka安装与配置

在Linux环境下安装和配置Apache Kafka通常涉及以下几个步骤：

1. **下载和解压Kafka**: 首先，你需要从Apache官网下载最新的Kafka发行版tar.gz文件，然后解压到一个指定目录，比如 `/opt/kafka`。

wget https://downloads.apache.org/kafka/3.1.0/kafka_2.13-3.1.0.tgz
tar -xzf kafka_2.13-3.1.0.tgz -C /opt/

2. **环境变量配置**:
在`/etc/profile.d`目录下创建一个新的环境变量文件（如 `kafka-env.sh`），设置KAFKA_HOME路径和其他环境变量，例如：

   export KAFKA_HOME=/opt/kafka/kafka_2.13-3.1.0
   export PATH=$PATH:$KAFKA_HOME/bin

3. **启动Zookeeper服务 (如果没集成)**: 如果你没有将Zookeeper包含在Kafka打包里，需要单独安装并启动。默认端口是2181。

4. **配置Kafka**: Kafka依赖于`config/server.properties`文件进行基本配置，包括broker ID、监听地址、日志目录等。示例配置:

   # brokers.list = localhost:9092
   listeners=PLAINTEXT://localhost:9092,SSL://localhost:9093
   log.dirs=/var/log/kafka/data

5. **创建 topics**: 使用`kafka-topics.sh`脚本创建生产者和消费者使用的主题。

6. **启动Kafka服务器**:

   $ bin/kafka-server-start.sh config/server.properties

7. **验证安装**:
- 可通过命令行工具`kafka-console-producer.sh`和`kafka-console-consumer.sh`测试生产和消费功能。