summary
2025-09-18 10:41 AM EDT 起,Google 核心服务(Search、Gmail、YouTube、Drive)在美国多地出现登录失败与 502 错误,持续约 1 小时 13 分。根因是认证与配额系统的自动化配置错误在全球传播,触发认证拒绝与 DNS 解析错误;依赖 Google 认证(如 Sign in with Google)的第三方站点也失败。Downdetector 峰值超 2.5 万份报告,87% 指向登录问题。
timeline
10:41 EDT 用户开始报告 Search/Gmail/YouTube/Drive 登录失败。11:00 EDT Downdetector 激增,认证出现 502。11:30 EDT Google Workspace 状态面板确认已定位并缓解根因、恢复进行中。约 11:54 EDT(约 1h13m 后)服务基本恢复,建议用户刷新。
root_cause
Google 将其归因为 API 管理系统的自动化配额配置错误在全球传播,触发认证拒绝与 DNS 解析错误。认证系统(IAM/Identity)在区域负载均衡异常下资源争用,部分区域出现「无法验证身份」,新登录与会话维持失败。
amplifiers
① 认证集中:Gmail/Drive/YouTube 及大量第三方 SSO 都依赖同一认证系统,单点故障广。② 全局传播:配额配置错误秒级复制全球。③ SSO 外溢:Sign in with Google 的第三方站点连带失败,放大可见影响。
mitigation
绕过故障的配额检查并打补丁恢复服务;对受影响的区域负载均衡与认证路径做修复。后续强化配额系统的灰度与回滚。
lessons
认证系统必须高可用且故障隔离;全局配置变更需灰度+快速回滚;SSO 依赖方应有降级(如备用登录)以应对 IdP 中断。
checklist
① 认证系统多区域独立且与配置传播解耦。② 配额/配置变更强制灰度+一键回滚。③ 第三方 SSO 提供降级登录路径。④ 认证层容量与资源争用可观测。