summary
2017 年 9 月,Stack Overflow / Stack Exchange 因防火墙配置错误,阻断了自身流量,导致问答站点大面积不可访问。
timeline
一次防火墙策略变更引入错误规则;站点入口流量被拦截,用户无法访问;回滚防火墙配置后恢复。
root_cause
网络团队在下发防火墙策略时写入了错误的匹配或动作规则,将合法的用户访问流量误判为需丢弃。
amplifiers
防火墙处于流量主路径,错误规则立即全量生效;缺乏变更后的连通性冒烟测试。
mitigation
回滚防火墙策略;建立变更后自动连通性检查。
lessons
边界安全设备变更需先在隔离环境验证;主路径设备配置应有提交前校验与快速回退。
checklist
防火墙变更评审加冒烟测试;保留已知良好配置快照;变更避开高峰。