微软发布报告:前几天那场罕见的 24 小时全球宕机,是自己今年 7 月埋下的雷。给网络网关推了次更新,藏了个大 Bug,一直没人发现。
这个网关是多数在线服务的必经之路,平时没事,负载一高就会卡死。11 月 12 日,网关本来就坏了一部分机器,系统又按惯例把另一款办公软件的用户挤过来,再赶上美国上班高峰,一台接一台倒下,邮箱、云备份、在线办公全挂了。
代码改了已三个月,没法一键回滚,只能一边重启一边扩容硬扛,修了快一天才搞定。雷埋得早,收拾起来也慢。
微软发布报告:前几天那场罕见的 24 小时全球宕机,是自己今年 7 月埋下的雷。给网络网关推了次更新,藏了个大 Bug,一直没人发现。
这个网关是多数在线服务的必经之路,平时没事,负载一高就会卡死。11 月 12 日,网关本来就坏了一部分机器,系统又按惯例把另一款办公软件的用户挤过来,再赶上美国上班高峰,一台接一台倒下,邮箱、云备份、在线办公全挂了。
代码改了已三个月,没法一键回滚,只能一边重启一边扩容硬扛,修了快一天才搞定。雷埋得早,收拾起来也慢。