kafka Partition

Kafka中的Partition是指将一个Topic分成多个Partition，每个Partition对应一个文件夹，用于存储消息。每个Partition中的消息都有一个唯一的offset，用于标识该消息在Partition中的位置。Kafka通过Partition来实现消息的并行处理，提高了消息的吞吐量和可靠性。

Kafka的Partition分发策略主要有两种：Round-robin和自定义Partitioner。如果没有使用Partition Key，Kafka就会使用Round-robin的方式来决定写入哪个Partition。而如果使用了Partition Key，Kafka就会根据Partition Key和分区数量来计算出该消息应该写入哪个Partition。

下面是一个自定义Partitioner的实现类的例子，该实现类根据key和分区数量来实现Partition分发策略：

public class MyPartitioner implements Partitioner {
    @Override
    public int partition(String topic, Object key, byte[] keyBytes, Object value, byte[] valueBytes, Cluster cluster) {
        List<PartitionInfo> partitions = cluster.partitionsForTopic(topic);
        int numPartitions = partitions.size();
        int partition = 0;
        if (keyBytes == null) {
            partition = ThreadLocalRandom.current().nextInt(numPartitions);
        } else {
            partition = Math.abs(Utils.murmur2(keyBytes)) % numPartitions;
        }
        return partition;
    }

    @Override
    public void close() {
    }

    @Override
    public void configure(Map<String, ?> configs) {
    }
}