一个操作失误,阿里云大规模故障,引发大量吐槽
(点击上方公号,快速关注我们)
综合自:云头条(ID: yuntoutiao)、微博、阿里云、CSDN 等
阿里云因 bug 禁用内部 IP 导致链路不通,造成大规模故障
27日,阿里云午夜在官网、微博发布了故障公告:
6月27日下午,我们在运维上的一个操作失误,导致一些客户访问阿里云官网控制台和使用部分产品功能出现问题,引发了大量吐槽。故障于北京时间2018年6月27日16:21左右开始,16:50分开始陆续恢复。
经过紧急技术复盘,故障原因如下:
当天下午,工程师团队在上线一个自动化运维新功能中,执行了一项变更验证操作。这一功能在测试环境验证中并未发生问题,上线到自动化运维系统后,触发了一个未知代码bug。错误代码禁用了部分内部IP,导致部分产品访问链路不通。 后续人工介入后,工程师团队快速定位问题进行了恢复。
受影响范围包括阿里云官网控制台,以及MQ、NAS、OSS等产品功能。
对于这次故障,没有借口,我们不能也不该出现这样的失误!我们将认真复盘改进自动化运维技术和发布验证流程,敬畏每一行代码,敬畏每一份托付。
下午 16:30 左右,微信朋友圈、微信群、微博出现阿里云故障消息,故障原因主要体现在阿里云官网、控制台无法访问,尝试登陆阿里云官网,显示如下:
官网有时候可以访问,有时候显示502错误的网关,即使官网可以访时,点击登陆,页面只会刷新,登陆不了。
一位行业从业者发推称:阿里云的函数计算挂了,导致线上故障。打算马上降级到本地计算,结果阿里云的 Kubernetes 也挂了。想着挨个机器手工改一下,发现 OSS 也挂了…整个过程没有报警,因为 SLS 也挂了…(备注:未得到阿里云官方确认)
官网公告称16:21左右开始,阿里云官网的部分管控功能,及MQ、NAS、OSS等产品的部分功能出现故障,以下为全文:
阿里云官网通告:6月27日阿里云部分产品及账号登录访问异常通告
【阿里云】【网络】【异常通告】
异常时间:北京时间2018年6月27日16:21左右。
异常概述:于北京时间2018年6月27日16:21左右开始,阿里云官网的部分管控功能,及MQ、NAS、OSS等产品的部分功能出现访问异常,阿里云工程师正在紧急处理中,请您稍后重试。
【异常更新】
北京时间2018年6月27日 16:50
目前受影响的业务正在逐步恢复中,若遇到异常,请您稍等后重试。
【异常更新】
北京时间2018年6月27日 17:30
目前受影响的业务大部分已经恢复正常,请您确认。若还有异常,请您跟我们反馈,谢谢。
故障时间 50 分钟左右,故障原因,阿里云尚未披露。
以下为用户吐糟:
网友吐糟:毕竟是自主研发的云,当然有点小脾气
写在最后
每一次的故障确实不应该发生,但有时又难以避免。对此,不少网友表示,理解身为同行的程序员们,解决问题比解决人更重要。
但是也有不少人认为:
出了故障可以原谅,那客户的损失该如何算?
如果是没按规范操作导致的事故肯定是要处罚的,否则这次事故的复盘就是无价的经验啊。
技术人员肯定得背故障啊,但是这事应该要升级,不是说一个技术人或者开除就算了的。
对此,你怎看呢?
【关于投稿】
如果大家有原创好文投稿,请直接给公号发送留言。
① 留言格式:
【投稿】+《 文章标题》+ 文章链接
② 示例:
【投稿】《不要自称是程序员,我十多年的 IT 职场总结》:http://blog.jobbole.com/94148/
③ 最后请附上您的个人简介哈~
关注「程序员的那些事」,不错过圈内事
一个操作失误,阿里云大规模故障,引发大量吐槽相关推荐
- 阿里云大规模即时云渲染支撑天猫双11“直播未来城”
在今年的天猫双11购物狂欢节,一个名为淘宝"直播未来城"的3D空间,首次出现在了淘宝App中. 据悉,"直播未来城"是线上大规模沉浸式3D互动应用在电商营销场景 ...
- 《阿里云大规模即时云渲染支撑天猫双11“直播未来城”》
在今年的天猫双11购物狂欢节,一个名为淘宝"直播未来城"的3D空间,首次出现在了淘宝App中. 据悉,"直播未来城"是线上大规模沉浸式3D互动应用在电商营销场景 ...
- IEEE 解除华为限制;AWS、谷歌云大规模故障;TypeScript 3.5 发布 | 极客头条
快来收听极客头条音频版吧,智能播报由标贝科技提供技术支持. 「CSDN 极客头条」,是从 CSDN 网站延伸至官方微信公众号的特别栏目,专注于一天业界事报道.风里雨里,我们将每天为朋友们,播报最新鲜有 ...
- 解密阿里云大规模深度学习性能优化实践
云栖号资讯:[点击查看更多行业资讯] 在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 作者 | 阿里云异构计算AI加速负责人 游亮 近日,斯坦福大学公布了最新的 DAWNBench 深 ...
- 【警告:操作失误造成硬盘毁灭性故障】
熟悉电脑的朋友都了解,现如今的硬盘都加入了 S.M.A .R.T 自动侦测技术,以便让用户提前看到故障的苗头,以备份好数据,这都是针对正常操作情况下设计的.如果用户的使用方法是如下面所列的,那硬盘故障 ...
- 说说阿里云大规模宕机
背景 云服务市场是一块大蛋糕,从如今的各大巨头都纷纷出手想分得一杯羹就能看出.而国内巨头阿里爸爸早在2009年就看准了时机,这里当然少不了要提到阿里云创始人:王坚.破釜沉舟的方式用命换来的成就,阿里每 ...
- 【每日新闻】阿里云回应大规模故障:运维操作失误 将认真改进 | 分析师:Azure已取代Windows成为微软新的增长点...
. 点击关注中国软件网 最新鲜的企业级干货聚集地 趋势洞察 2018中国软件生态大会暨第十一届中国软件渠道大会首站在北京.天津.太原.郑州.济南站成功举行,同时拉开了覆盖上海.深圳.成都.西安等全国1 ...
- AI一分钟|阿里云解释故障原因:触发了一个未知代码Bug;清华蝉联ISC18超算竞赛总冠军...
▌阿里云发说明解释昨日故障原因:触发了一个未知代码Bug 今日凌晨,阿里云官方微博针对昨日出现的大规模故障问题作出官方回应.声明称,在运维上的一个操作失误,导致一些客户访问阿里云官网控制台和使用 ...
- 阿里云发生故障会怎样
文章里一句话说得挺好的: 敬畏每一行代码,敬畏每一份托付! 6 月 27 日下午,有众多网友在微博中反馈阿里云平台出现了访问故障.我们从阿里云官网公告中了解到,故障的开始时间为 2018 年 6 月 ...
最新文章
- SQL2005学习(九),将数据库备份到网络共享文件夹中
- 病毒入侵计算机的危害,那些年电脑中过的病毒,中病毒的危害又有哪些
- 一文读懂word embedding
- Java剖析工具JProfiler入门使用教程:离线剖析和触发器
- NYOJ 642 牛奶
- fatal: unable to access ‘https://github.com/PanJiaChen/vue-element-admin.git/‘: OpenSSL SSL_read: Co
- Acer 4750 安装黑苹果_安装黑苹果,你需要注意哪几点
- android模拟器游戏按键映射,刺激战场模拟器按键映射对比 逍遥安卓模拟器智能按键最好...
- 即将上线的Kafka 集群(用CM部署的)无法使用“--bootstrap-server”进行消费,怎么破?...
- SIM800C 使用基站定位
- 2022最新Web前端经典面试试题及答案-史上最全前端面试题(含答案)
- 菜鸟教程 linux ubuntu,菜鸟教程 Ubuntu 11.0下搭建Web服务器
- vsphere esxi原生下载方式
- Win10下可连wifi的笔记本共享网络至台式机
- ORB_SLAM2系列之三:ORB_SLAM2跑RGBD SLAM数据集
- S3C2440c语言汇编传参点灯
- mysql 字段 decimals_[转]分析MySQL数据类型的长度【mysql数据字段 中length和decimals的作用!熟悉mysql必看】...
- 软件工程项目:电梯调度
- 【论文阅读】【三维目标检测】Pseudo-LiDAR from Visual Depth Estimation
- 软考高项 : (27)信息系统项目管理师模拟试题