土法炼钢兴趣小组的算法知识备份

【流式数据处理】RocksDB State Backend 内核路径

2026-07-01 | database · distributed | #flink #rocksdb #state-backend #lsm-tree #checkpoint #keygroup #column-family #incremental-checkpoint

拆解 Flink EmbeddedRocksDBStateBackend 的物理布局：每个 subtask 独立 RocksDB 实例、ColumnFamily 与 KeyGroup 前缀映射、写路径 memtable→WAL→flush→compaction 与 lsm-tree 系列对照、读路径 block cache 与读放大、增量 checkpoint 与全量 snapshot 的 IO 差异。