linux 查看kafka中topic的数据

在Linux环境下查看Kafka中topic的数据，通常需要使用Kafka命令行工具`kafka-console-consumer`或通过Kafka消费者API来获取。以下是几个步骤：

1. **使用`kafka-console-consumer`**:
- 首先，确保你已经安装了Kafka客户端并配置了环境变量。如果你不确定是否安装，可以运行`kafka-topics.sh --describe`来检查Kafka是否可用。
- 使用下面的命令来实时查看某个topic的消息，假设topic名为`my-topic`：

     kafka-console-consumer --bootstrap-server <broker地址> --topic my-topic --from-beginning

- `<broker地址>`应替换为你集群的实际连接信息。

2. **通过API查询**:
- 如果你想编写脚本或者程序来批量获取数据，你可以使用Kafka的`KafkaConsumer` API，例如在Java中：

     Properties props = new Properties();
     props.put("bootstrap.servers", "<broker地址>");
     props.put("group.id", "test"); // 消费者组ID，可选，默认无
     KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
     consumer.subscribe(Arrays.asList("my-topic"));
     while (true) {
         ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
         for (ConsumerRecord<String, String> record : records) {
             System.out.printf("offset = %d, key = %s, value = %s%n", record.offset(), record.key(), record.value());
         }
     }

- 这段代码会持续拉取消息直到进程终止。