这是一份从真实瓶颈出发的系统设计学习路线。重点不是背诵组件名,而是先明确流量、数据量、延迟和可用性目标,再用度量、权衡与故障演练解释每一次架构演进。
你最终会获得什么
- 能把模糊需求改写成可计算的容量目标,区分平均值、峰值与增长余量。
- 能解释缓存、负载均衡、数据库复制、分片、消息队列和异步任务分别解决什么问题。
- 能识别一致性、可用性、延迟、成本与运维复杂度之间的取舍。
- 能画出一条请求链路,并说明每个环节的超时、重试、限流和降级策略。
- 能完成一次结构化的系统设计陈述,而不是堆叠微服务流行词。
1. 先建立估算模型
开始阅读前,准备一台可运行本地服务的电脑,并复习 HTTP、SQL、索引、进程与线程、基础数据结构和网络延迟。无需先搭建 Kubernetes;单机实验同样能观察连接池、慢查询和队列积压。
每个设计先回答四个问题:
- 谁在使用:用户、内部服务还是定时任务?读多还是写多?
- 规模多大:每秒请求数、单请求大小、日增数据量和保留周期是多少?
- 多快才够:交互接口看尾延迟,批处理看完成时间,不能只写平均耗时。
- 出错怎么办:允许丢失、重复、短暂不一致或部分不可用吗?
练习:估算一个拥有 10 万日活用户的短链接服务。自行假设每人每天读取 20 次、创建 1 次,计算日均与峰值请求量;再估算三年记录数。明确写出假设,结果才有讨论价值。
2. 从单体开始,让瓶颈可见
第一版优先采用清晰模块边界的单体应用、一个主数据库和对象存储。把登录、内容、搜索和任务拆成代码模块,但暂不拆成网络服务。这样更容易定位事务边界,也避免分布式调用掩盖业务问题。
- 给请求增加唯一标识,记录耗时、状态码和关键业务结果。
- 为慢查询保存执行计划,为外部调用设置连接与读取超时。
- 先优化明显浪费:减少 N+1 查询、限制分页大小、压缩传输、移除重复计算。
- 用固定数据集做压力测试,分别观察 CPU、内存、磁盘、连接池和锁等待。
过关标准:给出一张单体请求图、一份容量估算和一次压测记录。没有数据时写“待测量”,不要把猜测包装成结论。
精选入口:System Design Primer 中文说明。
3. 读流量增长:缓存与横向扩展
当读请求成为瓶颈,先区分数据能否缓存、允许过期多久以及失效由谁触发。缓存不是越多越好;错误缓存会让权限、价格和库存出现严重问题。
- 浏览器与 CDN:适合公开、可版本化的静态内容,使用内容哈希避免旧文件长期残留。
- 应用缓存:适合重复读取且可短暂过期的数据,明确键、TTL、击穿与穿透策略。
- 负载均衡:让无状态实例可以水平扩展;会话文件和本地临时目录需要外置。
- 健康检查:区分进程存活与实例是否能接流量,发布时先摘流再停止。
设计缓存时写出读路径、写路径和失效路径三条流程。主动删除缓存后数据库写入失败、缓存旧值回填、热点键同时过期,都应成为测试用例。
练习:为“商品详情页”设计缓存。商品价格要求 1 分钟内一致,库存要求尽量实时,权限信息不可共享。说明哪些字段可以合并缓存,哪些必须分开。
4. 写流量增长:复制、分片与异步化
数据库复制可把部分读流量分到只读副本,也为主库故障提供恢复基础,但复制延迟会让用户刚写入后读不到自己的数据。分片则引入跨片事务、热点键和扩容问题,不能当作默认第一步。
- 先确认读己之写需求,必要时让刚写入的会话短时间读主库。
- 选择分片键时同时看数据分布、查询模式和未来扩容,不只看当前均匀程度。
- 把发邮件、生成报表等非即时工作放入队列,接口返回任务编号供查询。
- 消费者必须考虑重复投递;用业务唯一键、去重记录或幂等更新保护结果。
- 队列需要积压监控、失败重试上限和死信处理,不能只监控“服务在线”。
过关标准:解释一次请求从接口到队列、消费者、数据库和通知的完整链路,并演示消费者重启后不会重复发送通知。
5. 用故障场景检验设计
架构图完成后,逐个删除组件并描述系统表现。这个练习比继续添加组件更能暴露单点和隐含假设。
- 主数据库不可用:读请求能否继续?写入如何提示?恢复后怎样追平?
- 缓存整体失效:是否产生请求风暴?能否限流、预热或临时降级?
- 队列积压一小时:用户看到什么?扩容受什么资源限制?
- 第三方接口超时:是否耗尽线程和连接池?重试是否放大故障?
- 新实例发布错误:能否停止扩容、回滚并保留诊断信息?
重试必须使用上限、退避与随机抖动,并确认操作幂等。限流、熔断和降级是保护系统的不同手段,不能互相替代。
6. 系统设计表达模板
面试或方案评审可按以下顺序陈述,每一步都留下简短产物:
- 用 2 分钟确认用户、核心动作、规模和硬性限制。
- 写出读写比例、峰值 QPS、存储量和延迟目标的估算。
- 先画满足核心流程的最小架构,再指出最先出现的瓶颈。
- 每次只引入一个组件,解释收益、代价和新故障模式。
- 补数据一致性、权限、安全、监控、备份和发布回滚。
- 最后回顾需求,说明哪些部分仍需真实测量或业务确认。
综合项目:设计一个支持创建、跳转、过期和访问统计的短链接服务。交付两张图(核心链路与故障降级)、一份容量估算、数据库表设计、缓存失效策略和五个故障演练结论。
7. 来源、版本与许可
- 上游项目:donnemartin/system-design-primer。
- 固定 Commit:
ae9bbd7b02d90b9866215de185217d33f39ab733。 - 上游作者与版权:Donne Martin,Copyright 2017 Donne Martin。
- 上游许可:CC BY 4.0。
本文依据上游固定版本的主题结构重新编写学习顺序、估算练习与故障清单,并补充本站原创示例。本文以 CC BY 4.0 共享;引用上游时保留上述署名、版本和许可链接。上游链接的外部资料分别遵循其自身条款。