【分布式系统百科】分布式日志：Kafka 的日志抽象与 Pulsar 的分层架构
Jay Kreps 在 2013 年的博客文章"The Log: What every software engineer should know about real-time data's unifying abstraction"中提出了日志（Log）作为分布式系统基础抽象的思想。日志不是应用程序的调试日志，而是…
Kafka 标签归档
共 4 篇文章 · 返回首页
【系统架构设计百科】消息队列架构：异步解耦的设计与陷阱
在分布式系统中，服务之间的直接同步调用会导致强耦合、级联故障和性能瓶颈。消息队列（Message Queue）作为异步通信的核心基础设施，在现代架构中承担着解耦、削峰、容错等关键职责。然而，引入消息队列并非没有代价——投递语义的选择、顺序性保证、消费者组再平衡、幂等消费等问题，每一个都隐藏着工程陷阱。本文将从原理到实践…
【系统架构设计百科】零拷贝与内存映射：数据搬运的极致优化
一次普通的文件传输在 Linux 内核中要经历 4 次数据拷贝和 4 次上下文切换。sendfile、splice、mmap、io_uring、DPDK 各自用不同的方式缩减这条路径，但每种方案都有自己的使用条件和工程限制。本文从 Linux 内核的数据搬运路径出发，拆解五种零拷贝（Zero-Copy）技术的机制与取舍，结合 Kafka、Nginx、DPDK 的工程实践，讨论什么场景该用、什么场景不该用。
【系统架构设计百科】事件驱动架构：从消息通知到事件溯源
事件通知、事件携带状态转移、事件溯源三种模式经常被混为一谈，但它们在耦合度、数据一致性、存储成本和调试难度上有本质差异。本文基于 Martin Fowler 的 EDA 分类，拆解三种模式的机制与取舍，分析 Kafka 在事件驱动架构中的角色与局限，讨论事件排序的工程挑战和 schema 演进策略。