摘要
- Google Cloud将8月20日
us-west1高严重性服务事件归因于计划内光纤维护;该维护在俄勒冈州The Dalles都会区造成意外拥塞。官方事件记录列出27项受影响产品。 - Google两次建议在可行时切换到其他区域。能否执行这项建议,取决于客户是否已准备好数据副本、流量控制、身份凭据、外部依赖和决策权限。
维护是计划内的,拥塞却不是。两者之间的差距,正是运营方在检修期间为业务保留了多少可用容量。在us-west1,Google称光纤维护使这部分容量不足以吸收负载,影响随后跨越多个云服务层面。
事件记录把开始时间记为8月20日15:40 UTC。Google在16:44:37发布首条公开更新,相隔超过一小时,称多个产品出现超时、性能下降、错误和延迟升高。17:13:59和17:32:15的更新均建议客户在可行时切换至其他区域。
最终更新称,工程师恢复容量后,底层问题已于17:22 UTC缓解;这份说明实际发布于19:37:40。其间,状态更新一度表示缓解措施已经完成,但各项产品仍在继续恢复。事件记录本身则在19:20结束。
这四个时间对应不同状态:15:40是记录中的起点,17:22是Google事后给出的底层问题缓解时间,19:20是事件记录的终点,19:37:40是最终公开说明的发布时间。它们都不能单独证明某个客户应用在何时恢复健康。
该事件被标记为高严重性、影响类型为SERVICE_OUTAGE,共列出27项产品,涵盖计算、存储、数据库、数据处理、构建、监控、身份和消息服务。其中包括Compute Engine、GKE、Cloud Run、Cloud Storage、Cloud SQL、BigQuery、Pub/Sub、Cloud Monitoring、IAM和Persistent Disk。
如此广的名单说明存在共享的区域依赖,但不能解读成27项产品面向所有客户同时完全中断。Google未公布逐产品影响比例、失败请求数、客户或项目基数、可用区分布及延迟分布。不同产品可能经历集中错误、控制面任务延后或更广的可用性损失,公开记录没有逐项区分。
早期更新还在俄勒冈州之外显示了Global位置标记,但叙述始终把客户症状放在us-west1。该标记可能描述产品范围或状态页分类,不能据此声称Google Cloud发生全球性中断。
Google的架构资料说明,云产品共同依赖网络、数据中心访问和身份授权等内部功能,跨区复制与区域切换同样依赖物理网络。因此,恢复光纤容量可以解除共同约束,却不会让每项托管服务在同一秒完成恢复。
对客户而言,“可行时切换”是一项有条件的操作。第二区域必须已经存在,数据新鲜度要满足恢复点目标,DNS或负载均衡策略、队列、凭据、外部依赖以及授权链也必须在压力下正常工作。
Google的可靠性指南要求测试区域切换、回滚和数据恢复,并验证流量迁移与复制数据。架构图上存在一个备用区域,或长期闲置一套环境,都不能证明恢复时间目标可以兑现。
公开材料没有说明具体光路、运营商、拓扑、被移除的容量、拥塞阈值或维护动作;也没有证明出现数据丢失、光纤割断、安全事件,或某个具名客户切换失败。Google表示稍后会提供分析,但截至证据截点,事件记录内没有这份分析。
能够成立的结论更窄,也更有运营价值:依Google的说明,计划维护减少了可用网络容量并造成区域拥塞,随后恢复沿多个产品逐步展开。供应商容量、单项产品健康度和客户应用状态必须分别观测。
来源
- https://status.cloud.google.com/incidents/utF3FMFdQfwBzJcGG6vf
- https://status.cloud.google.com/incidents.json
- https://docs.cloud.google.com/architecture/infra-reliability-guide/building-blocks
- https://docs.cloud.google.com/architecture/framework/reliability/perform-testing-for-recovery-from-failures?hl=en
- https://docs.cloud.google.com/docs/geography-and-regions?hl=en
会员简报
档案背景详情
使用相应会员等级登录,即可解锁完整简报与来源注释。
仅限 Strategic Circle
Strategic Circle
所有读者均可浏览。加入并登录后可解锁档案简报。
加入 Strategic Circle仅限 Leadership Alliance
Leadership Alliance
符合条件的 IP 资产所有者和管理层可登录查看 Leadership Alliance 简报。
加入 Leadership Alliance

