土法炼钢兴趣小组的算法知识备份

【流式数据处理】状态放大、Compaction 与调优

2026-07-01 | database · distributed | #flink #rocksdb #state-tuning #compaction #write-amplification #hot-key #skew #window-state #checkpoint #lsm-tree

在 RocksDB state backend 读写路径之上，拆解窗口 state 膨胀、LSM 写放大与 checkpoint 争抢磁盘、Flink managed memory 与 RocksDBOptionsFactory 调参边界，以及 hot key 导致单 subtask 过热时的诊断与「改 state 设计 vs 拧参数」取舍。