cat case/PM-SNOWFLAKE-TOKYO-20260803.md

Snowflake 亚太(东京)访问中断:网络路由层更新回滚

P1 ·

摘要

2026年8月3日 00:53–06:15 UTC,Snowflake AWS 亚太(东京)区域出现间歇性 Snowsight 登录失败、页面加载缓慢、会话超时("Failed to fetch"/"Execution failed"/HTTP 503)。初步根因:一次旨在提升网络路由层连接处理效率的更新引发问题,回滚该更新后恢复。影响仅限于东京区域,其他地区不受影响。

时间线

2026-08-03 00:53 UTC东京区域开始出现 Snowsight 登录失败/503
2026-08-03 05:53 UTCSnowflake 发布调查更新,限定影响范围为东京
2026-08-03 06:15 UTC识别问题来源并回滚更新,服务恢复
2026-08-03 06:58 UTC状态页标记 Resolved

根因

一次针对网络路由层连接处理效率的更新(配置/代码变更)引入异常,导致东京区域控制面与 Web 接口间歇性失败;回滚该更新后服务恢复。

放大因素

  • 仅影响单区域(东京),但该地区用户无法稳定登录
  • 错误为间歇式,重试可部分成功,增加定位难度

缓解措施

  • 识别问题来源并回滚网络路由层更新
  • 建议使用该区域复制(replication)的客户启动故障转移

经验教训

  • 跨区域灰度发布与快速回滚机制对控制面变更至关重要
  • 单区域变更也需独立监控,避免间歇错误被平均值掩盖
  • 参考来源:Snowflake 状态页 https://status.snowflake.com/incidents/ns7hfk8pbqfy

检查清单

  • 网络路由层变更强制灰度 + 自动回滚
  • 区域级登录/503 错误率独立告警
  • 复制与故障转移预案可一键启动