cat case/PM-2018-0021.md

Epic Games 2018-02-03 新并发峰值 340 万超出容量,Fortnite 部分/全面服务中断

P1 · Epic Games Fortnite 新峰值 340 万并发用户致部分/全面服务中断

summary

2018-02-03,Epic Games 的 Fortnite 在迎来新并发峰值(约 340 万同时在线)时,超出其服务容量规划,导致部分乃至全面的服务中断,大量玩家无法登录或匹配。

timeline

新并发峰值出现,在线数冲高至约 340 万;服务器容量与匹配/登录服务承压,出现登录失败、匹配排队与中断;Epic 通过扩容与限流缓解,数小时内逐步恢复。

root_cause

用户增长与活动带来远超容量规划预期的并发峰值,登录/匹配/会话服务的容量不足,形成排队与失败。本质是容量规划未跟上爆发式增长且缺少足够的弹性上限。

amplifiers

① 单款游戏爆发式增长远超容量基线。② 登录/匹配为强依赖,过载即全链路受阻。③ 缺乏足够弹性与排队降级,错误直接暴露给用户。④ 恢复依赖紧急扩容。

mitigation

紧急扩容并引入更合理的排队/限流与降级;后续重构容量规划以吸收突发峰值。

lessons

爆款产品的容量必须按可预期峰值的数倍规划并具备弹性;登录/匹配等入口服务需排队与优雅降级而非直接失败。

checklist

① 按峰值数倍规划登录/匹配容量。② 入口服务加排队与降级。③ 容量压测覆盖突发增长。④ 监控并发数与错误率联动扩容。