土法炼钢兴趣小组的算法知识备份

【GPU 算子工程】Roofline 模型：判断算子是 compute-bound 还是 memory-bound

2026-06-28 | gpu · architecture | #cuda #roofline #arithmetic-intensity #compute-bound #memory-bound #performance-model

Roofline 用算术强度把算子定位到性能上限曲线，回答优化该往算力还是访存使劲。在 RTX 3060 Ti 上实测扫描算术强度，得到经验屋顶线：脊点约 36 FLOP/byte，低强度区贴带宽、高强度区逼近 FP32 峰值 86%。