cat case/PM-SNOWFLAKE-USEAST-20260805.md

Snowflake 美东 Cortex/CoCo 中断:底层文件系统连接故障

P1 ·

摘要

2026年8月5日 11:40–15:00 UTC,Snowflake AWS 美东(N. Virginia)区域的 Cortex/CoCo AI 服务通过 Snowsight 间歇性不可用,用户交互时收到 "Internal Server Error"。初步根因:支撑 Cortex 服务的底层系统组件因与文件系统的连接问题发生故障。其他 Snowflake 功能不受影响。

时间线

2026-08-05 11:40 UTC美东区域 CoCo/Cortex 开始出现 Internal Server Error
2026-08-05 14:41 UTCSnowflake 定位到不健康的底层基础设施
2026-08-05 15:00 UTC识别根因(支撑组件与文件系统连接故障)并恢复
2026-08-05 15:14 UTC实施修复并持续监控,标记 Monitoring

根因

支撑 Cortex/CoCo AI 服务的底层系统组件与文件系统之间出现连接故障,导致该组件失效,进而使相关 AI 服务间歇返回 500 级错误。其他 Snowflake 功能不受影响。

放大因素

  • AI/ML 服务强依赖底层文件系统的组件,单点故障即阻断服务
  • 错误呈间歇性 500,部分请求成功,增加用户困惑

缓解措施

  • 修复底层组件与文件系统的连接,恢复服务
  • 持续监控环境确认稳定

经验教训

  • AI 服务的底层存储/文件系统连接需独立健康探针
  • 区域级 AI 功能应与核心数仓解耦,避免连带影响
  • 参考来源:Snowflake 状态页 https://status.snowflake.com/incidents/j7drswl3ssy7

检查清单

  • 底层组件 ↔ 文件系统连接健康探针
  • AI 服务错误率独立告警(区别于核心数仓)
  • 区域级故障转移预案