彦祖们应该都听说了:微软这两天大宕机! 故事从北京时间 13 号凌晨说起,一大批美国用户突然发现,自己怎么也连不上 Outlook 邮箱。 Outlook,就是微软的办公软件,里面除了邮箱,还包含了日程管理、会议邀请等功能。 国外大部分 公司 和 政府机关 ,上班都是用 Outlook 沟通。 起初,大家还在网上发帖问怎么了。 结果这头 Outlook 还没恢复,微软的 Teams、Copilot、SharePoint 也陆续开始连接出现问题。 后来大家去监测故障的网站 Downdetector 一查,发现已经有 74 个国家和地区的报告说微软崩了。 什么,全球市值第三的微软崩了? ? 按常理来说,这种体量大厂的核心业务是不可能崩的。真要崩了,也一定很快能抢救好,对吧? 但谁能想到,微软服务一直到 14 号凌晨才彻底恢复。 那这 24 小时里,全球打工人受到多大影响呢? 工作效率倒退个 20 年吧。 比如英国就有几百家医院用回了纸质病历,甚至很多手术被临时取消。 因为英国国家医疗服务体系(NHS)100 多万员工,平时收发邮件、开会、传文件用的 NHS.net Connect 的系统,都要依赖微软服务。 NHS 系统登录不上后,所有病人资料发不出去也收不进来,连重症患者的紧急转诊也没办法通知。 还有英国法院系统平时靠 Outlook 收发邮件,什么民事案件判决也是用邮件发送的。 结果邮箱一挂,判决结果都只能推到下周一宣布。。。 受害法院之一↓ 同样遭殃的还有日本。 日本数字厅给各部门搭的政府共通平台 GSS ,用的就是 Microsoft 365。 这下好了,各部门的 Outlook 收发不了邮件,最后靠着电话、短信来办公。 好好好,全员回到 90 年代,开始复古 Y2K 时尚。 根据美国研究机构估计,这次微软带来的损失大约在 70 亿美元。 这影响的人一多,网友们的梗图也就跟着来了,反正看热闹不嫌事大。 有人发了一张 Microsoft 364 的图片,什么 Microsoft 365,今年得少算一天了。 微软必须改名!别问,问就是规矩。 还有网友发了一张 NASA 控制中心的照片,一屋子工作人员抱在一起欢呼:微软 Outlook 挂了,而且今天是周五。。。 只能说对不少打工人来说,周五早上邮箱打不开,确实等于周末提前开始了。 说到这问题就来了,微软闹出这么大规模的故障,到底啥情况? 一开始,微软怀疑是一个负责检查服务器健康状况的组件出错了,但直到昨天(16 号)发了初步事故报告,大家才算把原因搞清楚。 反正看完报告,哥们只想说: 确实不是黑客搞的微软,纯粹 自己 搞 自己 。 微软 365 里的邮件、Teams、网盘这些服务,全世界的用户连进来时,都要先过一层「网络网关」。就像进地铁站,得先过闸机。 这道网关呢,微软准备了两套:一套主网关,一套备用。 每套网盘都有一大批服务器,相当于一排排闸机,用户先过闸,再被领到后面对应的服务。 出事前,邮件走的是主网关,Teams 走的是备用网关。两套互为备份,哪套出了状况,服务就能切到另一套去。 这次出问题的, 正好 就是主网关 。 根据微软官方说法,导致事故的一共有 3 个伏笔。 第一个伏笔是 7 月份时,微软给网关服务器打了个补丁,里面藏着一个缺陷。 它会让服务器一个内部程序出现「锁竞争」。 锁竞争就是抢东西。好比营业厅里只有一枚公章,每个柜员办业务都得排队等它。柜员越多,排队就越久,活反而办不完。 所以这个缺陷,在 CPU 核心越多的服务器上,反而更严重。 可骚的是,微软做 压力测试 用的基本是核心少的服务器,自然发现不了这个问题 。于是这个补丁就这么在全球的网关上平安无事地跑了三个多月。。。 第二个伏笔,是出事前 15 个小时的一次切换。 Teams 从备用网关转移到了主网关,跟 Outlook 背后的邮件服务 Exchange Online 挤在了一起。微软说这种切换很正常,可主网关的压力就大了点。 第三个伏笔是事故前一天,因为另一个不相干的问题,主网关有 14% 的服务器还关闭着,正在慢慢恢复。 三个伏笔凑到一起时: 主网关本来就有 14% 的服务器关着,Teams 的流量又全挤了过来,还正好赶上美国上班的流量高峰。 于是 主网关剩下的服务器越来越忙, 直接触发了锁竞争 ,开始一台接一台卡死。 接着,微软的保护机制开始帮倒忙: 哪台服务器卡死了,系统就自动把它的用户转移到主网关里其他还正常的服务器上,可大家都有问题,所以流量转到哪,哪就跟着卡死。 于是 不到两小时,超过 80% 的主网关服务器 都 寄 了。 更要命的是,本来网关里还设了隔板,防止一个地方的故障传到别的地方。可这些隔板又因为另一个问题没挡住,故障就这么一路扩散到了全球。。。 这时,两套网关派上用场了。 Te
保持积极向上的心态,专注于场上的表现,避免负面情绪影响。...
保持积极向上的心态,专注于场上的表现,避免负面情绪影响。...