🔥🔥双十一,阿里云又双叒出问题了

阿里云又挂了

就在双十一热火朝天的进行时,阿里云又双叒出问题了

为什么说又,因为就在不久前,语雀就因为云服务问题出现了故障,在8小时后才得以恢复。 但这次故障影响的范围较上次相比就大得多了,不但语雀出现了问题,淘宝、钉钉等APP均收到了影响,许多依赖阿里云的产品也受到了影响。 "淘宝又崩了""闲鱼崩了" "阿里云盘崩了""钉钉崩了" 等话题陆续登上热搜。知道的以为云服务出现了问题,不知道的还以为马云跑路了。

不久后阿里云发布公告,确定了影响的范围

大约在8点左右,服务陆续恢复

不知道是否有了上次的经验,这次修复问题的速度快了很多。只用的三个小时就修复了问题。 上次语雀出现了问题,给广大用户赠送了会员,不知道这次故障又能给大家带来多少"福利"。

如何处理故障

说完阿里,要是真是我们在实际遇到了这种问题改怎么处理呢

  1. 首先我们要确认故障发生的原因,有可能虽然是我们负责的服务在不停的报错,但问题的根源不在我们这里,这时我们要及时的向上反馈,找到上游的同学,共同确定问题的原因
  2. 如果在修改配置或上线代码后发生了报错,不要想 首要的就是将配置或代码回滚,恢复问题比确认原因更加重要,问题可以下来后慢慢复盘,但对用户造成的影响是很大的。
  3. 如果自己掌控不住局面或者确定不了原因,及时摇人。还是那句话,优先解决问题,其他的都是次要的。
  4. 如果确定了问题的原因,及时向上级和受影响的团队说明原因,千万不要闷头一直干,每当有进展及时通报。在制定修复的临时方案时也最好拉上团队的小伙伴,避免二次问题。每次刷数据或者修改的代码上线前一定要第二个人review,不然忙中出错就更是添乱。如果时间充裕,能有测试同学帮忙测试那是最好的。
  5. 在问题解决后,也要总结经验教训,无论是好的还是坏的。这对我们都是一次成长,做的好的地方在团队内可以推广,形成制度规范。做的坏的也找原因,避免下次出现同样的问题。

尾声

有一说一,阿里的技术能力在国内也是数一数二的,但在近期却频繁发生这样的问题,不仅是对自身产品的不负责,更是对广大用户的不负责。异地多活这种不应该只出现在面试中,更应该在实际中落地。作为技术开发者,任何时候都要对系统保持敬畏之心,一个小小bug就可能导致业务上的重大损失。

相关推荐
智商偏低几秒前
ASP.NET Core 中的简单授权
后端·asp.net
程序员鱼皮1 分钟前
我做了个 AI 文档阅读神器,免费开源!
人工智能·程序员·ai编程
练习时长一年17 分钟前
搭建langchain4j+SpringBoot的Ai项目
java·spring boot·后端
bobz96517 分钟前
Proxmox qemu-server
后端
文弱书生65636 分钟前
5.后台运行设置和包设计与实现
服务器·开发语言·c#
编码浪子40 分钟前
趣味学RUST基础篇(异步补充)
开发语言·后端·rust
songroom1 小时前
Rust : 关于Deref
开发语言·后端·rust
bobz9651 小时前
对比 qemu 分析 rust vmm 的成熟度
后端
不会c嘎嘎1 小时前
Linux -- 基于TCP服务器实现一个简单的电商网站
linux·服务器·tcp/ip
程序leo源1 小时前
Linux_基础指令(二)
android·linux·运维·服务器·青少年编程