您现在的位置是:系统运维 >>正文
谷歌云服务大规模中断事件溯源,API 管理系统故障引发全球瘫痪
系统运维62人已围观
简介2025年6月12日,谷歌云Google Cloud)遭遇近年来最严重的服务中断事件,其API管理系统出现关键故障,导致全球数十项服务瘫痪长达七小时。此次事故源于服务控制Service Control ...
2025年6月12日 ,谷歌规模I管谷歌云(Google Cloud)遭遇近年来最严重的云服服务中断事件,其API管理系统出现关键故障,中断障引导致全球数十项服务瘫痪长达七小时。事件溯源此次事故源于服务控制(Service Control)二进制文件中出现的理系空指针异常,该组件负责管理API授权和配额策略,统故影响范围覆盖谷歌云平台(GCP)和Google Workspace产品的发全数百万用户。

故障根源在于谷歌的球瘫服务控制系统——这个区域性服务负责在基础设施中授权API请求并执行配额策略 。源码下载2025年5月29日,谷歌规模I管工程师部署了新增配额策略检查功能,云服但相关代码既缺乏完善的中断障引错误处理机制 ,也未启用功能标志(feature flag)保护。事件溯源
危机爆发的理系直接原因是 :包含意外空白字段的策略变更被写入服务控制系统依赖的区域性Spanner数据库表。由于配额管理具有全球同步特性,香港云服务器统故这些损坏的发全元数据在几秒内就完成了全球复制 。当服务控制系统尝试处理这些空白字段时,触发了未受保护的代码路径 ,导致空指针异常,最终引发所有区域二进制文件同时进入崩溃循环状态 。
"本次变更的根本问题在于既没有配置适当的错误处理机制 ,也没有启用功能标志保护。服务器租用由于缺乏错误处理,空指针直接导致二进制文件崩溃 。"谷歌在事故报告中解释道。
网站可靠性工程(SRE)团队在10分钟内定位到根本原因,并在40分钟内部署了"红色按钮"紧急终止开关 ,关闭问题服务路径。虽然大部分区域在两小时内恢复,但us-central1区域却遭遇持续性问题——当服务控制任务在这个主要区域重启时 ,对底层Spanner基础设施形成"羊群效应" ,海量并发请求导致数据库不堪重负 。
工程师发现服务控制系统缺乏预防级联故障的建站模板随机指数退避机制。谷歌不得不限制任务创建 ,并将流量路由至多区域数据库以减轻过载基础设施的压力 。这一延长恢复过程影响了包括谷歌计算引擎(Compute Engine) 、BigQuery 、云存储(Cloud Storage)在内的核心服务 ,这些产品构成众多企业数字业务的基石。
整改措施针对此次大规模服务中断,云计算谷歌制定了全面整改方案:
立即冻结服务控制堆栈的所有变更和手动策略推送,直至系统完全修复对服务控制架构进行模块化改造,确保在个别检查失败时仍能保持API请求处理能力(故障开放而非关闭)全面审计所有使用全局复制数据的系统强制要求所有关键二进制变更必须启用功能标志保护受影响服务超过60项 ,涵盖Gmail 、Google Drive、Google Meet 、App Engine 、云函数(Cloud Functions)和Vertex AI等产品。谷歌强调现有流媒体和基础设施即服务(IaaS)资源仍保持运行,高防服务器但客户在整个中断期间遭遇API和用户界面间歇性访问问题。
Tags:
转载:欢迎各位朋友分享到网络,但转载请说明文章出处“算法与编程”。http://www.bzli.cn/html/981b299016.html
相关文章
为什么数据安全不再是可选项而是必选项
系统运维安全漏洞的成本不仅仅是金钱。今天对数据安全进行投资可以防止长期的负面后果,这些负面后果会耗费企业的时间、金钱和声誉。获取威胁情报数据是防止网络攻击的主要步骤,而网络抓取是现代数据驱动型企业的首选方法 ...
【系统运维】
阅读更多CPU安装不好可能导致的问题(了解CPU安装的重要性及可能出现的后果)
系统运维在计算机硬件中,CPU中央处理器)被认为是大脑的核心,负责处理和执行所有计算机指令。正确安装CPU对于计算机的正常运行至关重要。本文将探讨如果CPU安装不好可能导致的问题,并强调正确安装CPU的必要性 ...
【系统运维】
阅读更多3DS裸眼3D技术的魅力与应用探索(进入全新的3D视觉世界——让我们一起探索3DS裸眼3D的奇妙之处)
系统运维随着科技的不断发展,人们对于三维视觉体验的需求也日益增长。而3DS裸眼3D技术的问世,为我们带来了一种前所未有的全新体验。本文将详细介绍3DS裸眼3D技术的原理、特点及其在娱乐、教育和医疗等领域的应用 ...
【系统运维】
阅读更多
热门文章
最新文章
友情链接
- 揭秘苹果耳机6s音质的绝佳表现(聆听细节世界,感受耳边的音乐奇迹)
- 以友唱(与好友合唱,畅享音乐的魅力)
- Metabones(全面解析Metabones的优势及应用领域)
- iPhone7防抖技术(探索iPhone7防抖技术的出色表现和关键特性)
- 探索SonyVaioVPCEA28EC的功能与性能(一款值得关注的笔记本电脑选择)
- 华硕笔记本光盘换系统安装教程(轻松学会如何通过光盘更换华硕笔记本系统)
- 外星人声卡(探索未知领域的声音艺术)
- 昊诚电池(以昊诚电池怎么样为主题的研究及评价分析)
- 尼康D700(探索尼康D700的出色性能和多功能特点)
- 高铁餐服(高铁餐服的创新与发展) 网站建设亿华云企业服务器源码库云服务器香港物理机b2b信息平台