量化交易
从市场微结构入手,建立量化工程全栈视角
覆盖从因子研究、回测方法论到执行算法与高频架构的整条链路,适合策略研究员与工程师系统切入。
发布来自土法炼钢兴趣小组的知识、笔记、进展和应用。主题包括数据结构和算法、编程语言、网络安全、密码学等。
第一次访问时先按主题切入,比直接沿着时间线翻文章更快。
量化交易
覆盖从因子研究、回测方法论到执行算法与高频架构的整条链路,适合策略研究员与工程师系统切入。
大模型基础设施
把训练、推理、量化与服务化串成一条工程主线,覆盖 GPU、并行、推理引擎与量化落地。
密码学
先理解量子威胁,再顺着 FHE、迁移工程与 TLS 实践继续往下读。
排序算法
把 TimSort、pdqsort、radix sort、external sort、parallel sort 串成一条工程化阅读路径。
把已经形成系列阅读闭环的主题集中在首页,减少在 400 多篇文章里盲找的成本。
按最近更新时间排序;如果你想系统性阅读一个主题,优先回到上面的专题入口。
汇总本站数据库内核文章:PostgreSQL / MySQL InnoDB / 列存引擎 / 数据湖与开放表格式 / 流式数据处理 / 分布式 OLAP 查询引擎 / RocksDB 内核 / 向量检索引擎,以及 LSM-Tree 从零实现实验。
定位专用向量检索引擎相对 ANN 算法、RAG 应用与湖仓格式的分工;以 Milvus 2.6.x 四层架构给出本系列 18 篇地图,并交代从 SIGMOD 2021 系统论文到存算分离演进的谱系。
把 HNSW、IVF、DiskANN、Flat 收成引擎侧的索引类型与参数面;说明 Train/Build/Search 生命周期如何贴着 Segment,并与 db-frontier/08 的算法细节、第 8 篇 Knowhere 实现分层分工。
钉住 Milvus 2.6.x 的数据模型词汇:Collection/Partition、vchannel/pchannel 与 Streaming Node 绑定,Growing/Sealed 段类型、flush 与 handoff,为后续写路径与读路径提供共同状态机。
按 Milvus 2.6.x 四层架构拆解无状态 Proxy 的校验与 MPP 归并,以及单活跃 Coordinator 的 DDL/TSO、Streaming 绑定、Query 拓扑与离线任务调度;说明控制面与 Worker 的分工边界。
按 Milvus 2.6.x Streaming Service 拆解 Message/TSO、WAL 组件、Recovery Storage 与 Query Delegator;说明 Woodpecker 零本地盘设计与 MemoryBuffer/QuorumBuffer 模式,并标明官方吞吐数字的引用边界。
说明 Milvus 2.6.x 对象存储持久化的职责边界(日志快照、标量/向量索引、中间结果),Growing flush 后 Sealed 如何进共享存储,以及按字段拆分 binlog 与按段整合(StorageV2/Parquet)在对象存储 API 次数上的工程含义。
按 Milvus 2.6.x Data Processing 与 Architecture 拆解 Query Node 对 Sealed 的加载与段级检索,说明 Streaming Node 上 Growing 路径与 Query Delegator 如何拼成一次 search,并界定 Segcore 与 Knowhere 的层次。
按官方 Knowhere 文档说明其在 Milvus 中的位置、相对 Faiss 的扩展(bitset、SIMD 选择、二进制度量)、VecIndex 类层次与 IDMAP/IVF/HNSW 等类型,并与 db-frontier/08 的算法细节分工。
按 Milvus 2.6.x Data Processing 与 Architecture 拆解 search 的多级归并树:Proxy → Streaming Node Delegator → Query Node 段级结果;说明 shard 并发、Top-k 合并直觉,以及 GuaranteeTs/ServiceTime 如何让一致性变成等待。
说明 Milvus 2.6.x 中 Data Node 作为离线 Worker 如何承接 Coordinator 下发的建索引与 compaction,输入输出如何进出对象存储,以及索引堆积与 handoff 如何影响查询新鲜度与资源争用。
在 Milvus 引擎路径上落实 filtered ANN:表达式与 bitset 如何进入 Segcore/Knowhere,pre-filter/post-filter 在段级归并下的失效模式,以及对读 db-frontier/09 的 ACORN 争论而不重写算法全文。
按官方 Consistency Level 与 Timestamp 文档说明 Strong/Bounded/Session/Eventually 如何映射到 GuaranteeTs,ServiceTime 等待如何影响尾延迟,并对照 2.6 Growing/Sealed 分流下的「刚写入就能搜到」精确含义。
按官方文档说明 delete(主键/过滤)、upsert(override/merge)、collection TTL 的语义;结合 bitset 软删与 compaction 物理回收,划清「搜索不可见」与「对象存储已清理」的时间差。
按官方 In-Memory Replica 与 Streaming Service 说明副本组、shard/historical 副本、Proxy 缓存与 failover;对照 2.6 Streaming Delegator 多副本,以及 WAL Wait for Ready 与 handoff 负载均衡。