summary
2018-02-03,Epic Games 的 Fortnite 在迎来新并发峰值(约 340 万同时在线)时,超出其服务容量规划,导致部分乃至全面的服务中断,大量玩家无法登录或匹配。
timeline
新并发峰值出现,在线数冲高至约 340 万;服务器容量与匹配/登录服务承压,出现登录失败、匹配排队与中断;Epic 通过扩容与限流缓解,数小时内逐步恢复。
root_cause
用户增长与活动带来远超容量规划预期的并发峰值,登录/匹配/会话服务的容量不足,形成排队与失败。本质是容量规划未跟上爆发式增长且缺少足够的弹性上限。
amplifiers
① 单款游戏爆发式增长远超容量基线。② 登录/匹配为强依赖,过载即全链路受阻。③ 缺乏足够弹性与排队降级,错误直接暴露给用户。④ 恢复依赖紧急扩容。
mitigation
紧急扩容并引入更合理的排队/限流与降级;后续重构容量规划以吸收突发峰值。
lessons
爆款产品的容量必须按可预期峰值的数倍规划并具备弹性;登录/匹配等入口服务需排队与优雅降级而非直接失败。
checklist
① 按峰值数倍规划登录/匹配容量。② 入口服务加排队与降级。③ 容量压测覆盖突发增长。④ 监控并发数与错误率联动扩容。