cat case/PM-2019-0117.md

Google Cloud 2019 雷击致电力丢失与数据损坏

P1 · 欧洲某数据中心电力丢失,部分 HDD 永久数据丢失

summary

2019 年,Google Cloud 欧洲某数据中心(europe-west1-b)连续遭遇雷击导致电力丢失,部分 HDD 发生永久数据丢失。

timeline

雷击击中供电设施,数据中心掉电;冗余切换未能完全兜底,部分磁盘损坏;Google 从副本恢复并通知受影响用户。

root_cause

极端天气(雷击)造成电力中断,备用电源与冗余在连续打击下不足,部分存储介质永久性损坏。

amplifiers

电力冗余设计未覆盖连续雷击场景;少数未充分复制的数据因此丢失。

mitigation

从地理复制副本恢复、加固电力冗余、审查复制覆盖率。

lessons

极端自然灾害需超配电力冗余;关键数据必须有跨区复制。

checklist

电力多路冗余;数据跨区复制;灾备演练;介质健康检查。