2023年互联网公司年度崩盘报告

B站崩了两次

2023年3月5日晚20:20左右,许多网友表示在使用B站时,手机和电脑端都无法访问视频详情页,且手机端无法查看收藏夹与历史记录。

8月4日晚间,距离上次事故5个月后,又有许多网友反馈B站图片(视频封面)无法加载、视频无法打开、视频一直在缓冲。

image

image

唯品会“329”事故

2023年 3月29日,“唯品会崩了”登上热搜,由于崩溃时间太长,影响了很多消费者无法正常下单。

6月5日,唯品会发布处理公告,将此次故障判定为最高级别的P0级故障,对应部门的直接管理者承担此次事故责任,基础平台部负责人予以免职作相应处理。

image

微软Azure故障,17个生产级数据库被删

2023年5月24日,微软Azure DevOps在巴西的一处scale-unit发生故障,导致宕机约10.5 个小时,导致该中断的原因为一个简单的拼写错误,最终导致17个生产级数据库被删除。

img

中国电信大规模无服务

2023年6月8日,中国电信的网络和通信服务出现无信号等失灵现象,绝大部分反馈的用户都在广东区域,疑似广东省内故障,历时4个小时左右,广东省内电信网络全面恢复。

img

10月23日语雀崩盘

故障原因及处理过程

10 月 23 日下午,服务语雀的数据存储运维团队在进行升级操作时,由于新的运维升级工具 bug,导致华东地区生产环境存储服务器被误下线。受其影响,语雀数据服务发生严重故障,造成大面积的服务中断。

为了尽快恢复服务,我们和数据存储运维团队全力进行数据恢复工作,但受限于恢复方案、数据量级等因素,整体用时较长。

具体过程如下:

  • 14:07 数据存储运维团队收到监控系统报警,定位到原因是存储在升级中因新的运维工具 bug 导致节点机器下线;
  • 14:15 联系硬件团队尝试将下线机器重新上线;
  • 15:00 确认因存储系统使用的机器类别较老,无法直接操作上线,立即调整恢复方案为从备份系统中恢复存储数据。
  • 15:10 开始新建存储系统,从备份中开始恢复数据,由于语雀数据量庞大,此过程历时较长
  • 19:00 完成数据恢复;同时为保障数据完整性,在完成恢复后,用时 2 个小时进行数据校验;
  • 21:00 存储系统通过完整性校验,开始和语雀团队联调,最终在 22 点恢复语雀全部服务。用户所有数据均未丢失。

语雀团队声称,“通过这次故障我们深刻认识到,语雀作为一款服务千万级客户的文档产品,应该做到更完善的技术风险保障和高可用架构设计,尤其是面向技术变更操作的‘可监控,可灰度,可回滚’的系统化建设和流程审计,从同 Region 多副本容灾升级为两地三中心的高可用能力,设计足够的数据和系统冗余实现快速恢复,并进行定期的容灾应急演练。只有这样,才能提升严重基础设施故障时的恢复速度,并从根本上避免这类故障再次出现。”

为此,语雀团队制定了如下改进措施:

  • 1、升级硬件版本和机型,实现离线后的快速上线。该措施在本次故障修复中已完成;
  • 2、运维团队加强运维工具的质量保障与测试,杜绝此类运维 bug 再次发生;
  • 3、缩小运维动作灰度范围,增加灰度时间,提前发现 bug;
  • 4、从架构和高可用层面改进服务,为语雀增加存储系统的异地灾备。

语雀团队表示,为了表达歉意,团队将向所有受到故障影响的用户提供如下赔偿方案:

  • 针对语雀个人用户,我们赠送 6 个月的会员服务。操作流程:进入工作台「账户设置」,点击左侧「会员信息」,在会员信息页面点击「立即领取」,即可获得赠送服务。
  • 针对语雀空间用户,由于情况比较复杂,我们会单独制定赔偿方案。请空间管理员留意语雀站内信。

11月12日阿里云史诗级崩盘

11月12日晚间,中国市场份额排名第一的阿里云崩溃了,和以往相比,这次崩溃的时间点有点特殊。

一、此次崩溃,阿里巴巴集团新团队刚刚上任两个月,就出现了如此重大的事故。

二、10月31日,阿里巴巴新任董事会主席蔡崇信刚刚“表扬”完阿里云,刚过了十一天,就出现了大问题。

三、本次崩溃出现在“双十一”第二天,阿里巴巴旗下各集团以及使用阿里云服务的很多公司业务都异常繁忙,但阿里云崩溃了。

image

有人说,阿里云崩溃,只是一次技术问题,实则不然。

云计算被称为数字经济乃至全社会重要的基础设施。蔡崇信此前表示,阿里巴巴就希望让计算成为像水和电一样的公共服务。

毫不夸张的说,阿里云崩溃,对于互联网企业来说,就有点类似于国家电网停电,天然气公司断气、自来水公司停水。

因为云服务的重要性,曾有人建议,应该让国企来提供服务。不过,阿里云目前在国内是“巨无霸”式的存在。

蔡崇信在10月31日举行的2023云栖大会上介绍说,目前全国80%的科技企业和超过一半的AI大模型公司跑在阿里云上。包括10月闭幕的杭州亚运会核心系统100%跑在云上。

7月21日,阿里巴巴发布的2023财年年报显示,阿里云营收达到772.03亿元,占公司整体营收的9%。阿里云目前是全球第三、亚太第一的云计算公司。

2023财年,阿里云服务全球400多万客户,包括80%的中国科技创新企业、60%的国家级专精特新“小巨人“企业。阿里云的服务覆盖油气、电力、交通、金融、酒旅、企服、通信等实体产业。

本次阿里云崩溃,旗下淘宝、闲鱼、阿里云盘、饿了么、钉钉在内的多款产品均出现了服务器故障问题。

还有网友称,智慧笑联APP因为受到阿里云服务影响也不能使用。“就连充电桩和学校里的洗衣机、饮水机机器都‘崩’了。”

image

image

由此可见,阿里云的崩溃绝不简单,小到某个互联网公司无法运行,大到关系国计民生的项目无法正常运转。

推特宕机

2023年2月,推特严重宕机,马斯克暴怒,因其关于超级碗的推文曝光度不如美国总统,深夜紧急召集约80名员工解决算法问题。

3月份,因一名工程师修改配置导致推特出现严重的宕机故障,马斯克扬言要将这堆“shit code”全部进行重构。

ChatGPT故障

2023年11月8日晚22点左右,OpenAI旗下ChatGPT及相关API出现中断故障,导致面向用户和开发者的服务近2小时无法正常使用。

随后OpenAI CEO公开致歉称,本周发布的新功能遇到远超预期的使用量,由于负载的原因,短期内可能会出现服务不稳定的情况。

滴滴11.27系统服务故障:

2023年11月27日晚间,滴滴因系统故障导致App服务异常,不显示定位且无法打车;11月28日早间,滴滴出行称网约车等服务已恢复,骑车等在陆续修复中。

11月29日,滴滴再次发文致歉,称初步确定事故起因是底层系统软件发生故障。

image

这次事故发生时,上海、北京、广州等多地滴滴用户反馈,滴滴出行 APP 无法使用,地图无法加载。有网友称,使用滴滴呼叫了网约车后,APP 突然无法使用,司机找不到乘客。有网约车司机在社交平台表示,正在送乘客途中,出现导航无法使用,地图无法加载等情况。image-20240103211614355

12月29日上午11左右CSDN崩溃

image

image

image

写在最后

编程严选网(www.javaedge.cn),程序员的终身学习网站已上线!

如果这篇【文章】有帮助到你,希望可以给【JavaGPT】点个赞👍,创作不易,如果有对【后端技术】、【前端领域】感兴趣的小可爱,也欢迎关注❤️❤️❤️ 【JavaGPT】❤️❤️❤️,我将会给你带来巨大的【收获与惊喜】💝💝💝!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/288666.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

定时器PWM控制RGB彩灯案例

1.脉冲宽度调制PWM PWM(Pulse Width Modulation)简称脉宽调制,是利用微处理器的数字输出来对模拟电路进行控制的一种非常有效的技术,广泛应用在测量、通信、工控等方面。   PWM的一个优点是从处理器到​​ ​被控系统​​​信号…

软碟通UltraISO制作U盘安装Ubuntu

清华大学开源软件镜像站https://mirrors.tuna.tsinghua.edu.cn/ 从里面下载ubuntu-22.04-desktop-amd64.iso UltraISO是一款非常不错的U盘启动盘制作工具,一直被许多网友们所喜欢,使用简单、方便。 UltraISO官方下载地址:https://cn.ultrais…

5年经验之谈 —— 为什么要做自动化测试?

自动化测试是一种软件测试方法,通过编写和使用自动化脚本和工具,以自动执行测试用例并生成结果 自动化旨在替代手动测试过程,提高测试效率和准确性 自动化测试可以覆盖多种测试类型,包括功能测试、性能测试、安全测试等&#xf…

网工内推 | 网络工程师,NP认证优先,上市公司,包吃,最高15薪

01 无锡先导智能装备股份有限公司 招聘岗位:高级网络工程师 职责描述: 1.依据项目规划方案提供硬件及网络方案设计; 2.面向客户提供网络技术支持,包括故障的解决、性能的优化、日常维护等; 3.和合作伙伴、供应商的技术…

NLP论文阅读记录 - 2021 | RefSum:重构神经总结

文章目录 前言0、论文摘要一、Introduction1.1目标问题1.2相关的尝试1.3本文贡献 二.前提堆叠重新排序 三.本文方法3.1 总结为两阶段学习3.1.1 基础系统3.1.2 元系统 3.2 重构文本摘要3.2.1 重构3.2.2 预训练重构3.2.3 微调重构3.2.4 应用场景3.2.4.1 重构为基础学习者3.2.4.2 …

Vue学习计划-Vue3--核心语法(一)OptionsAPI、CompositionAPI与setup

1. OptionsAPI与CompositionAPI Vue2的API设计是Options(配置)风格的Vue3的API设计是Composition(组合)风格的 Options API的弊端: Options类型的API,数据、方法、计算属性等,是分散在:data、methods、computed中的,若…

【Linux Shell】1. Shell 简述

文章目录 【 1. Shell 解释器、Shell语言、Shell脚本 】【 2. Shell 环境 】【 3. 一个简单的 Shell 脚本 】3.1 Shell 脚本的编写3.2 Shell 脚本的运行3.2.1 作为可执行程序运行 Shell 脚本3.2.2 作为解释器参数运行 Shell 脚本 【 1. Shell 解释器、Shell语言、Shell脚本 】 …

正则表达式 详解,10分钟学会

大家好,欢迎来到停止重构的频道。 本期我们讨论正则表达式。 正则表达式是一种用于匹配和操作文本的工具,常用于文本查找、文本替换、校验文本格式等场景。 正则表达式不仅是写代码时才会使用,在平常使用的很多文本编辑软件,都…

华为月薪25K的自动化测试工程师到底要会那些技能!

​前言 3年自动化测试软件测试工程师职业生涯中,我所经历过的项目都是以自动化测试为主的。由于自动化测试是一个广泛的领域,我将自己的经验整理了一下分享给大家,话不多说,直接上干货。 自动化测试的目标和实践选择合适的自动化…

2023 年博客总结

当无所事事,没有多少收获的时候,时间过得格外的快… 当充实有为,经常有收获有进步的时候,才觉得时间没有浪费… 2023年收获不多… 以前说孩子小,需要照顾所以没时间,我以为孩子大点就有时间了,…

Plantuml之甘特图语法介绍(二十八)

简介: CSDN博客专家,专注Android/Linux系统,分享多mic语音方案、音视频、编解码等技术,与大家一起成长! 优质专栏:Audio工程师进阶系列【原创干货持续更新中……】🚀 优质专栏:多媒…

QML —— Canvas重绘钟表组件(附完整源码)

示例效果] 源码 main.cpp #include <QGuiApplication> #include <QQmlApplicationEngine>int main(int argc, char *argv[]) {QCoreApplication::setAttribute(Qt::AA_EnableHighDpiScaling);QGuiApplication app(argc, argv);QQmlApplicationEngine engine;const…

自动化测试框架 —— pytest框架入门到入职篇

01、pytest框架介绍 pytest 是 python 的第三方单元测试框架&#xff0c;比自带 unittest 更简洁和高效&#xff0c;支持非常丰富的插件&#xff0c;同时兼容 unittest 框架。这就使得我们在 unittest 框架迁移到 pytest 框架的时候不需要重写代码。 pytest框架优点 1、简单…

学习Vue 01 欢迎来到Vue的世界

学习Vue 01 欢迎来到Vue的世界 概述 Initially released in 2014, Vue.js has experienced rapid adoption, especially in 2018. Vue is a popular framework within the developer community, thanks to its ease of use and flexibility. If you are looking for a great …

Python搭建代理IP池实现存储IP的方法

目录 前言 1. 介绍 2. IP存储方法 2.1 存储到数据库 2.2 存储到文件 2.3 存储到内存 3. 完整代码示例 总结 前言 代理IP池是一种常用的网络爬虫技术&#xff0c;可以用于反爬虫、批量访问目标网站等场景。本文介绍了使用Python搭建代理IP池&#xff0c;并实现IP存储的…

C#中使用正则表达式实现汉字转拼音

目录 一、正则表达式基础 二、实例 1.程序入口Form1.cs 2.类库PinYin.cs 三、生成效果 四、实例中的知识点 1.Regex 2.ToCharArray() 3.IsMatch() 4.GetBytes() 一、正则表达式基础 在C#中使用正则表达式&#xff0c;首先要创建正则表达式对象&#xff0c;正则表达…

前缀和算法 -- 寻找数组的中心坐标

个人主页&#xff1a;Lei宝啊 愿所有美好如期而遇 本题链接 力扣&#xff08;LeetCode&#xff09;官网 - 全球极客挚爱的技术成长平台 输入描述 给定一个数组&#xff0c;接口为int pivotIndex(vector<int>& nums) 输出描述 我们以示例1为例画图解释&#xf…

【Win】没设置Windows账户密码,如何远程登录

1、按下Win&#xff0c;输入本地&#xff0c;打开本地安全策略 2、找到这个 3、双击打开&#xff0c;改成已禁用 4、正常重新启动一次或者开关机一次永久生效。 - 我第一次弄完死机了&#xff0c;再开机发现没生效

前端基础:Vue搞笑白话文(工作之余瞎写)

1、data:{}与data(){return{}}这两个是个什么鬼&#xff1f; vue实例 new Vue({el:#app,data:{name:李四}}) 组件实例 const aaa Vue.extent({data(){return {name:}} }) 为什么Vue实例可以那么写而组件实例就不行了&#xff1f;原因就是因为在底层原理上&#xff0c;组件…

七:Day06_redis高级01

第一章 Redis入门 1.1 节 什么是NoSql型数据库 NoSQL ,泛指非关系型的数据库, NoSQL Not Only SQL,它可以作为关系型数据库的良好补充。NoSQL 不依赖业务逻辑方式存储&#xff0c;而以简单的key-value模式存储。因此大大的增加了数据库的扩展能力。 SQLNoSQL数据结构结构化非…