summary
2023-03-29，微信/QQ 出现大面积功能异常：语音通话、登录、朋友圈、支付、文件传输等部分或全面不可用，腾讯定义为一级事故并追责；根因为广州电信机房冷却系统故障。
timeline
广州电信机房冷却系统故障导致温度失控；依赖该机房的设备/链路异常，微信与 QQ 多项功能（登录/语音/支付/文件）受影响；冷却恢复与流量调度后逐步恢复，约数小时。
root_cause
机房配套设施（冷却系统）故障使环境温度越限，相关服务器/网络设备不可用，承载在其上的微信、QQ 服务降级。本质是外部机房基础设施故障（非服务商自身代码/配置）。
amplifiers
① 单机房冷却故障放大为国民级 App 大面积异常。② 登录/支付等强依赖受影响，舆论与业务影响大。③ 恢复依赖物理冷却与流量调度，耗时数小时。④ 腾讯定级一级事故并追责。
mitigation
恢复机房冷却并做流量调度/切走异常机房；后续加强机房基础设施冗余与多机房容灾。
lessons
机房基础设施（电/冷）是服务可用性的底层前提，须有多路冗余与监控；关键服务应跨机房/跨地域容灾，单机房故障不致命。
checklist
① 机房电/冷多路冗余与实时监控。② 关键服务跨机房/跨地域容灾。③ 单机房故障自动切流。④ 基础设施故障的事故定级与追责机制。