kafka batch.size
时间: 2024-04-19 19:09:25 浏览: 112
kafka中的batch.size是指Producer发送消息到Kafka时,将多个ProducerRecord实例组成一个批次(batch)的大小限制。当Producer发送的消息大小达到或超过batch.size设置的阈值时,才会触发发送到Kafka。
在一个batch中,除了消息内容本身的大小,还需要考虑元数据的大小。在上述引用的例子中,每个ProducerRecord实例的大小是17字节(消息内容10字节,ProducerRecord元数据7字节)。对于设置的batch.size为129的情况,4条消息的总大小为68字节,加上batch的元数据大小61字节,总大小为129字节,刚好填满了batch.size。因此,这4条消息会一起发送到Kafka服务。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* [Kafka基础概念](https://blog.csdn.net/Yuwen_forJava/article/details/105468362)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
- *2* *3* [Kafka-batch.size属性](https://blog.csdn.net/u011624903/article/details/108731672)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"]
[ .reference_list ]
阅读全文