土法炼钢兴趣小组的算法知识备份

【流式数据处理】Kafka 日志模型与分区

2026-07-01 | database · distributed | #kafka #log-segment #partition #offset #kraft #sendfile #record-batch #topic

从 Topic、Partition 到 Log Segment 的 .log/.index/.timeindex 文件布局，讲清 offset 单调性、分区内有序、顺序写与 sendfile 读路径，以及 Kafka 3.x KRaft 模式下元数据与日志目录的分工，为副本与 consumer 语义打底。