宕机超12小时,损失过亿,唯品会基础平台负责人被免职!|焦点简讯

2023-06-07 21:38:22 来源:新浪财经

打印 放大 缩小

炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!


(资料图片)

来源:CSDN

对于后端程序员来说,“高并发”并非新鲜的话题,经历过一次服务器宕机,职业生涯才“完整”。

但如果事故超过 12 小时,或许会直接造成职业生涯“宕机”!

3 月 29 日,#唯品会崩了#的话题登上热搜。

昨天,事件后续来了。

唯品会发布了关于 329 机房宕机故障处理公告:此次南沙机房重大故障,影响客户达 800 多万,判定为 P0 级故障,对负责人予以免职处理。

“崩”上热搜:损失超亿元,持续12小时

说起来,一切都还要追溯到 3 月末。

3 月 29 日,有多名网友反馈唯品会“崩了”,用验证码登录时显示网络错误,登不上去。

随后,唯品会官方微博表示:因系统短时故障,导致主站“加购”等功能或出现异常。

图源:微博截图

时隔 2 个多月,唯品会官方对故障事件做出了回应。

据悉,此次南沙机房重大故障的主要原因是南沙 IDC 冷冻系统故障导致机房设备温度快速升高宕机,造成线上商城停止服务。

故障影响时间持续 12 个小时,导致公司业绩损失超亿元,影响客户达 800 多万,公司将此次故障判定为 P0 级故障。( P0 属于最高级别事故,比如崩溃、页面无法访问、主流程不通、主功能未实现,或在影响面上影响很大。)

与此同时,唯品会认为此次事故暴露出容灾应急预案和风险防范措施不到位,并决定对此次事件严肃处理。对应部门的直接管理者承担此次事故责任,基础平台部负责人予以免职做相应处理。

其实,类似 329 号机房宕机的事故并非首次发生。

但毋庸置疑的是,唯品会作为拥有大量用户的电商平台,服务器和网络设备的正常运行至关重要。任何一次宕机事件,都会导致平台无法提供正常的服务,因此,每一次故障背后的原因和影响都值得大家思考,并引以为戒。

腾讯旗下社交软件受到“牵连”

同样值得注意的是,受到此次机房事故影响的还有微信、QQ 等腾讯旗下社交软件,包括微信语音对话、朋友圈、微信支付,以及 QQ 文件传输、QQ 空间和QQ 邮箱在内的多个功能无法使用。

图源:微博截图

对此,腾讯微信团队在 3 月 29 日上午发布信息称:“今天凌晨部分用户使用微信、微信支付相关功能出现异常,经工程师抢修,系统正在逐步恢复,很抱歉给大家带来不便。”

与此同时,腾讯内部对此事件的评估为“一级事故”,并对几名高管进行了不同程度的批评、降级和和免职处罚处理。

高并发引起的服务器宕机,频繁发生

随着直播电商平台的发展,用户数的增多导致高并发的概率增大。

近年来,各大平台、热门 APP 的服务器,都似乎难逃卡顿、崩溃乃至宕机的宿命。

2017 年双十一凌晨,在数百万消费者的激情涌入天猫之际,出现了大量手机淘宝、手机天猫的用户无法付款和修改地址,订单、足迹、收藏夹、红包卡券等异常问题,直到 12 点 30 分,天猫的服务器才恢复正常。

2021 年 10 月 20 日晚上,就在淘宝电商大促“双十一”刚开始之际,不少用户发现淘宝出现了客服聊天窗口消息发不出、不能点确认收货等诸多问题。随后,#淘宝崩了# 话题迅速登上微博热搜榜,并占据榜首第一。

如今,即使互联网相关技术已经迭代多轮,却仍然存在许多大规模以及时间长的宕机事件发生。

针对这类问题,在 CSDN 之前报道的《“一天宕机三次”,为什么高并发这么难?》一文中提到,可以从两个方面进行解析:

一方面故障是不可避免的,有人为的故障(人是容易出错的——Human Error)和非人为的故障(机器 Failure)。这些是无计划的停机,还有有计划的停机,如发布新系统、升级维护、更新硬件等。这也是为什么行业中即使部分公司做得再好也只能说自己能做到多少个 9,而非 100% 的主要原因。

当前,我们所能努力的就是尽可能地做到多少个 9,这其中需要很强的技术实力支撑。

级别

可用性级别

通俗说法

年度停机时间

配套措施

基本可用性

99%

2 个 9

3d-15h-39m-29s

服务在一个数据中心里有冗余,简单基础的自动化运维

高可用性

99.9%

3 个 9

8h-45m-56s

大量的自动化故障工具,以及各种控制调度系统等基础设施要做好

具有故障自动恢复

99.99%

4 个 9

52m-35s

本地多机房(像 AWS 一样每个地方都有三个可用区)

极高可用性

99.999%

5 个 9

5m-15s

远程多机房,异地多活

另一方面,从分布式架构设计来说,世界上的软件都是有故障的,当故障发生时,大家首先希望故障不要蔓延开,能够控制得住,其次还希望故障的时间越短越好,不要太长。

然而,架构系统也有很多的依赖,如基础设施 DNS、CDN、运营商、机房等等,想要实现稳定,需要大家一起实现。

网友:请给程序员加工资!

的确,服务器一旦宕机,消费者就无法对网站进行访问,客户下不了单,直接就会对公司经济利润造成很大的影响,甚至还可能影响到网站在搜索引擎上的收录和排名。

因此,每一年各个平台的促销拉开序幕之际,开发和运维人员都面临巨大的挑战。

伴随着#唯品会崩了相关负责人被免职#等话题再次引发大家关注,许多人纷纷留言表示:

“希望以后大公司会有一套很完善的避免和处理宕机事故的流程”;

“宕机是各家常有现象,这么久的处理时间就确实邋遢了”;

“还是要加强基础设施建设和技术管理”;

“关键时候千万不能崩,这个影响到的客户数量”。

与此同时,也有不少网友借此表达了对程序员职业的关怀:

“服务器宕机这个事情挺正常的,辛苦开发人员们维护了”;

“我曾经是程序员,知道维护的不易,请给程序员们加工资”。

炒股开户享福利,送投顾服务60天体验权,一对一指导服务!

关键词:

责任编辑:ERM523

相关阅读

精彩推送

西力科技:中标1.26亿元国家电网采购项目 快报 【天天速看料】比亚迪押中今年高考作文题:网友围观 戏剧性巧合让人感叹
欧盟将对实施“经济勒索”的国家加征关税是针对中国?外交部回应_当前短讯 【收评】燃油日内下跌0.69% 机构称燃油系期货走势跟随原油波动 焦点热门
纽威股份:股东纽威集团拟减持不超2%股份-关注 MR 头显很酷,但苹果缺席了更重要的事儿
宕机超12小时,损失过亿,唯品会基础平台负责人被免职!|焦点简讯 夏季圈养牲畜的日常管理|全球快资讯
世界要闻:罗博特科06月07日大涨,股价创历史新高 凯美特气:子公司例行停车检修完成并复产|全球快报
【速看料】多图直击!安康高考首日! 天天观点:高考首日逢雨天,奉贤公安全力保障考点周边交通出行
聚焦绿色、智能 中汽中心汽车测评新规程蓄势待发 全球观热点 天天微速讯:亚联发展:目前公司未参与《深圳市加快推动人工智能高质量发展高水平应用行动方案(2023—2024年)》的相关建设
苹果MR开发套件已开放申请 中国开发者期待推动3D内容生态|天天短讯 商务预报:5月29日-6月4日百家农副产品批发市场食用农产品交易量变化情况-天天微头条
全球球精选!“村超”踢出的这记“世界波”:让欧文都为它“打Call” 天天时讯:阿里健康在上海成立数据技术合伙企业
世界视点!商务预报:5月29日至6月4日禽产品零售价格小幅下降 组图|直击邵阳高考首日——时光不负追梦人
天天快讯:鸿博股份06月07日大涨,股价创历史新高 雨湖区法院 走访调研助力高质量发展_全球消息
万家乐热水器怎么样?A3W独创极火微焰技术 打造恒温热水体验 环球看热讯 恩捷股份:公司现有隔膜产品适用于储能电池_天天信息
全球即时看!天源环保:污泥碳化和生物质秸秆碳化研发项目采用了热储能技术 通光线缆:目前暂无产品应用在大模型计算的配套中
世界报道:男子醉驾去医院照顾住院老婆,结果途中发生交通事故 规模最大基金增聘基金经理 4位基金经理共同管理余额宝
盘江股份(600395)6月7日主力资金净买入928.35万元-当前播报 长春高新回应股价跌停:公司经营一切正常 集采对业绩影响“中性偏好”_当前热文
【天天新视野】浙能电力:水系锌离子目前尚未完成结题验收,但性能测试达到项目计划书指标要求 世界讯息:宏达股份(600331)6月7日主力资金净买入6493.61万元
中科星图在安徽5亿成立资本管理公司 扩募环节的打通 REITs一级半市场料将迎来更多的参与机会
盛和资源(600392)6月7日主力资金净卖出1458.87万元-今日看点 【全球新要闻】泰祥股份:江苏宏马零部件最终配套上汽大众、吉利、上汽等新能源汽车品牌
寒锐钴业:2022年度权益分派10派1.5元-全球热闻 焦点快报!航发科技(600391)6月7日主力资金净卖出247.96万元
河南焦作市开展“三夏”期间成品油价格专项检查 全球热点 (经济)江苏出台14条措施推动外贸稳规模优结构
即时焦点:ST海越(600387)6月7日主力资金净买入99.91万元 国旅联合(600358)6月7日主力资金净买入572.62万元
全球微头条丨江山股份(600389)6月7日主力资金净买入236.71万元 世界热消息:汇源通信董秘回复:感谢您对公司的关心与支持!公司目前没有开通微博、微信、抖音等新媒体沟通平台
tfodad 第31章: 环球今日报丨蒙是哪里的牌照(蒙代表哪里的车牌号码?)
窗户178ⅹ146是多少平方(一个窗户有多少平方怎么算) 收评:两市震荡分化沪指小涨 通信服务板块走强-全球快看
新的世界29:过去的记忆(下) 世界热门 焦点观察:东星医疗:吻合器产品目标海外市场主要集中在南美、中东以及欧洲三大区域
环球热议:旋风少女第三季电视剧全集在线观看(旋风少女第三季全集电视剧免费) 每日播报!庄易闲——为什么赌博那么难戒
第四章 失踪 滨江集团:今年截至目前交付的项目已超过10个
瑞典H2 Green Steel官宣与梅赛德斯-奔驰达成欧洲和北美地区供货协议 世界即时:天源环保:公司生产制造的纳滤、反渗透集成装备可用于盐湖提锂过程中的工艺单元 公司尚未涉及该类业务
世界播报:中再资环:全资子(孙)公司、控股子公司收到各类政府补助款项约855万元 全球速看:注意!菲菱科思:特定股东张海燕计划减持不超过100万股
博敏电子:截至本公告披露日 公司及其控股子公司对外担保总额为约26.88亿元 全球快播报 万绮雯的剧(万绮雯三级是哪部)-环球新动态
全球观天下!革斤念什么姓氏(革斤念什么) 鼎信通讯发布重大经营合同中标相关公告
23国君Y1今日发布发行公告 关于净水设备都有哪些?净水设备对日常生活的好处盘点|世界消息
实时:瞄准800亿电梯后市场!“万御电梯”亮相 第三章 危机意识
让AI来写今年的语文作文(星火大模型版) 全球要闻 恶性骨肉瘤一般能活多久(恶性骨肉瘤)|全球快资讯
每日速读!天天亮点!突发,闪崩跌停 建科机械:智能化钢筋加工配套软件和智慧工厂管理软件已在多家大型重点客户和项目使用
道通科技筑牢欧洲市场全解决方案供应商地位-当前快看 2023年3月厦门海关进出口总额及进出口差额统计分析|环球速看
32辆电动车实测:特斯拉Model S跑最远 小鹏G9反向虚标最多_天天热资讯 当前动态:专业代理2023年甘肃省中高级工程师职称晋级详情
【收评】菜油日内上涨0.10% 机构称油脂反弹乏力 焦点播报:mp4音乐格式是什么(mp4视频格式是什么)
非等位基因都位于非同源染色体上_非等位基因 中国联通数字技术助力信息无障碍和适老化改造
vivox9plus参数配置介绍(vivox9plus参数配置)|观点 【收评】硅铁日内下跌1.59% 机构称硅铁反弹做空为主
全球快消息!滨江集团:今年截至目前交付的项目已超过10个 因字组词语有哪些词语(因字组词)
青岛双星:公司目前主要销售渠道包括车厂配套渠道、经销商替换渠道及电商渠道,未来公司将会持续加大在新能源配套渠道及电商渠道的投入 环球关注 每日热文:客厅地板砖突然鼓起吉凶(客厅地砖突然响然后鼓起怎么回事)
昆船智能06月07日主力资金大幅流出 精选!江苏华辰06月07日主力资金大幅流出
天天快消息!嘉兴市民卡丢了去哪里补办_嘉兴市民卡遗失怎么补办 【收评】棕榈油日内下跌0.31% 机构称油脂反弹乏力 天天头条
2023年3月天津海关进出口总额及进出口差额统计分析 热点评 国家艺术基金资助项目《钢琴作品民族化创编人才培养》迎来“结业音乐会”
成都办理信用卡业务员电话,成都办信用卡座机号码-天天快消息 环球速读:青岛双星:公司目前主要销售渠道包括车厂配套渠道、经销商替换渠道及电商渠道,未来公司将会持续加大在新能源配套渠道及电商渠道的投入
【收评】棕榈油日内下跌0.31% 机构称油脂反弹乏力 天天新动态:海联金汇:公司智能制造板块将乘新能源快速发展的大势继续聚焦汽车零部件业务,金融科技板块重点发展移动信息业务和第三方支付业务
【收评】菜粕日内下跌1.29% 近5日累计涨幅1.71% 每日消息 世界新消息丨城市传媒:公司加快对AI领域重大技术突破的引入和应用,日前初步完成服务出版行业的专业大模型“万象”测试版开发,面向内部开启辅助专业图片生成等编发测试工作
广汇汽车:2022年,公司在新能源汽车销售和服务方面,借助自身在行业内的影响力,积极参与新能源市场布局 【收评】锰硅日内下跌1.66% 机构称硅锰钢招和盘面价格均较为承压
今日快讯:带你了解爱情公寓搞笑语录 佳力图06月07日主力资金大幅流出