云计算泥石流
冯若航 @Vonng / Pigsty
关于云计算、下云与基础设施自建的深度思考、成本分析与最佳实践。
阿里云rds_duckdb：致敬还是抄袭？
商业与开源本应共生共赢，企业若只想坐享其成而不反哺开源，最终只会沦为社区鄙视的对象。
DeepSeek.com网站证书错误
哎呀，怎么把自签名证书挂上首页了？犯这些低级错误可不合适呀。
API 是云服务的灵魂
对于绝大多数应用开发者来说，由于无法访问代码和硬件，最应该关注的云服务产品质量指标就是 API。
为什么云厂商销售只会打折？
产品和布道能力不足的云厂商，销售们唯一能打的牌就是：降价，打折扣，送优惠券，双十一大酬宾！
如何通过远离 AWS 将年服务器费用从 100 万降至 20 万
这周，我们采访了 Zsot Varga，Prerender.io 的管理者兼首席工程师。他分享了公司如何通过摆脱 AWS 平台，节省了 80 万美元，并构建了自己的基础设施来处理流…
网传江西教育厅高考查分网站删库跑路
传江教在线数据库服务器被格式化且无异地备份，他们应该庆幸这次故障不是在高考查分的时候发生，否则估计天都要捅穿了。
福利还是无双级BUG？网传支付宝14:40-14:45支付订单按国补减免了20%
刚刚小红书，微博，V站上多位用户发帖反馈在今天下午支付宝订单被 “政府减免” 20%。这究竟是天上掉下的馅饼，还是……
花钱买罪受的大冤种：逃离云计算妙瓦底
一位用户咨询分布式数据库，但他并不是因为数据大到要冲破服务器柜门，而是又栽在了云计算妙瓦底的杀猪盘套路中。
OpenAI全球宕机复盘：K8S循环依赖
即使是万亿级独角兽，在非专业领域上，也照样是个草台班子。
草台回旋镖：Apple Music证书过期服务中断
刚提议将HTTPS证书最大有效期缩短到45天，结果自己就中枪了，硅谷大手子Apple也难逃草台命运？
WordPress社区内战：论共同体划界问题
当开源理想遇上商业冲突，这对开源软件社区与云厂商之间的冲突又能带来什么启示？论社区边界划定的重要性。
记一次阿里云 DCDN 加速仅 32 秒就欠了 1600 的问题处理（扯皮）。
用惯了流量不要钱的赛博菩萨Cloudflare，这些本土CDN的吃相确实是太难看了。带宽按峰值不按P95计费，三分钱/GB的流量能卖到几毛钱，那跟抢钱有什么区别？
云数据库：用米其林的价格，吃预制菜大锅饭
RDS带来的数据库范式转变，云数据库是不是天价大锅饭。质量安全效率成本剖析核算，下云数据库自建，如何实战！
本号收到美团投诉：美团没有存储外卡CVV等敏感信息
昨天本号发了一篇《某平台CVV泄露：你的信用卡被盗刷了吗？》，随即收到了 美团的投诉，投诉内容如下所示：
某平台CVV泄露：你的信用卡被盗刷了吗？
草台班子新高度：某平台曝外卡CVV泄露，出现批量外卡信用卡被盗刷。
阿里云：高可用容灾神话破灭
新加坡C可用区故障头七，可用性还剩几个9，就连8都没有了，但与丢数据相比，可用性也只是小问题了。
阿里云盘灾难级BUG：能看别人照片？
网传阿里云盘灾难级BUG可以看到其他用户云盘图片。
草台班子唱大戏，阿里云PG翻车记
一位客户在云数据库上经历了一次离谱的连环故障：一套高可用PG RDS集群，因为扩容内存，主库从库都挂了，折腾到凌晨。期间昏招迭出，复盘敷衍。
我们能从网易云音乐故障中学到什么？
今天下午网易云音乐出现了两个半小时的不可用，根据网络上流传的线索拼图碎片，我们不难推断出这次故障背后的真正原因是……
GitHub全站故障，又是数据库上翻的车？
Github全站崩溃半小时，数据库基础设施变更翻的车。
数据库的“萝卜快跑”时刻已到，DBA 请下车
萝卜快跑在武汉开展运营的新闻一石激起千层浪。人类之所以在自动化的道路上不断探索，是为了克服自身的各种局限性。
DBA不是数据库的用户，开发者才是！
瑞典马工是个什么玩意？他凭什么来说 DBA ？我的朋友冯若航是个专业 DBA，非常关注数据库行业的发展，经常
蓝屏星期五：甲乙双方都是草台班子
甲乙双方都没有做好爆炸半径的控制，导致了这次史诗级的全球安全事件，这次事件将极大利好本地优先的软件理念。
阿里云又挂了，这次是光缆被挖断了？
上海可用区N核心服务受影响半个小时，知情人士透露故障的根因是挖掘机挖断专线。
阿里云rds_duckdb：致敬还是抄袭？
看到有人发了一篇《天上的“PostgreSQL” 说 地上的 PostgreSQL 都是“小垃圾”》， 文中大肆宣扬阿里云 RDS 新增了一个 rds_duckdb 插件，可以用来做 OLAP 分析， 并进一步带出“云 RDS PG 高高在上、PostgreSQL 开源只是‘小垃圾’”的极端观点，令人不适。 我对 DuckDB 及衍生的 pg_duckdb 扩展都很熟悉。 其实无论阿里云或其他云厂商在技术层面如何整合开源，只要合法合理合情，我个人都乐见商业与开源互利共赢。 但如果有人在宣传层面贬 …
看到有人发了一篇《天上的“PostgreSQL” 说 地上的 PostgreSQL 都是“小垃圾”》， 文中大肆宣扬阿里云 RDS 新增了一个 rds_duckdb 插件，可以用来做 OLAP 分析， 并进一步带出“云 RDS PG 高高在上、PostgreSQL 开源只是‘小垃圾’”的极端观点，令人不适。 我对 DuckDB 及衍生的 pg_duckdb 扩展都很熟悉。 其实无论阿里云或其他云厂商在技术层面如何整合开源，只要合法合理合情，我个人都乐见商业与开源互利共赢。 但如果有人在宣传层面贬 …
DeepSeek.com网站证书错误
DeepSeek 主域名（deepseek.com）的证书无效，浏览器访问 https://deepseek.com/ 会有错误提示： 看上去是 OpenSSL 默认自签名的 Internet Widgits Pty Ltd。 像这样的测试证书发到官网主域名上，确实是非常低级的错误了。 不过，访问 www.deepseek.com 与其他域名是正常的，使用的是 DigitalOcean 签发的有效证书。截止至到本文发布前，DeepSeek 已经将 deepseek.com 主域名 301 重定向 …
DeepSeek 主域名（deepseek.com）的证书无效，浏览器访问 https://deepseek.com/ 会有错误提示： 看上去是 OpenSSL 默认自签名的 Internet Widgits Pty Ltd。 像这样的测试证书发到官网主域名上，确实是非常低级的错误了。 不过，访问 www.deepseek.com 与其他域名是正常的，使用的是 DigitalOcean 签发的有效证书。截止至到本文发布前，DeepSeek 已经将 deepseek.com 主域名 301 重定向 …
API 是云服务的灵魂
原作者：瑞典马工 · 微信公众号转载页 前几天我发了一篇文章，批评阿里云的技术布道太差，以至于阿里集团的业务团队也宁愿用内部的盘古存储系统也不用阿里云的对象存储 OSS。有很多阿里的工程师很气愤，过来怼我，指出 OSS 的底层实现其实就是盘古，两者是一回事，甚至用盘古更高明。 JK \ 这位: 还有这位: 这几位认为只要最终 packets 流到了盘古系统，那么从哪个 interface 进来就无所谓。他们甚至有一些抑制不住的骄傲，觉得知道盘古是 OSS 的底座就很高明，而不知道的这个事实的就 …
原作者：瑞典马工 · 微信公众号转载页 前几天我发了一篇文章，批评阿里云的技术布道太差，以至于阿里集团的业务团队也宁愿用内部的盘古存储系统也不用阿里云的对象存储 OSS。有很多阿里的工程师很气愤，过来怼我，指出 OSS 的底层实现其实就是盘古，两者是一回事，甚至用盘古更高明。 JK \ 这位: 还有这位: 这几位认为只要最终 packets 流到了盘古系统，那么从哪个 interface 进来就无所谓。他们甚至有一些抑制不住的骄傲，觉得知道盘古是 OSS 的底座就很高明，而不知道的这个事实的就 …
为什么云厂商销售只会打折？
原作者：瑞典马工 · 微信公众号转载页 降价，打折，优惠券 从事 IT 行业的朋友们，都有一个很具体的感受，云厂商的销售们手里没什么武器，无非就是三样：降价，打折扣，给优惠券。这技术含量还不如农贸市场卖豆腐的。买豆腐的要讲清楚水豆腐，油豆腐和攸县香干的区别；要提供客家酿豆腐菜谱；还要发明西汉淮南王制豆腐的故事。相比之下，卖云计算的所谓专家们只需要做一个事：把目录价格乘以从0.2到0.95不等的折扣数，所需要的全部技能是小学四年级算术。 这个现象也体现在云厂商的财务报表中。大多数云厂商是不盈利的 …
原作者：瑞典马工 · 微信公众号转载页 降价，打折，优惠券 从事 IT 行业的朋友们，都有一个很具体的感受，云厂商的销售们手里没什么武器，无非就是三样：降价，打折扣，给优惠券。这技术含量还不如农贸市场卖豆腐的。买豆腐的要讲清楚水豆腐，油豆腐和攸县香干的区别；要提供客家酿豆腐菜谱；还要发明西汉淮南王制豆腐的故事。相比之下，卖云计算的所谓专家们只需要做一个事：把目录价格乘以从0.2到0.95不等的折扣数，所需要的全部技能是小学四年级算术。 这个现象也体现在云厂商的财务报表中。大多数云厂商是不盈利的 …
如何通过远离 AWS 将年服务器费用从 100 万降至 20 万
原作者：刘俊夏 · 微信公众号转载页 引言 这周，我们采访了 Zsot Varga，Prerender.io 的管理者兼首席工程师。他分享了公司如何通过摆脱 AWS 平台，节省了 80 万美元，并构建了自己的基础设施来处理流量和缓存数据。他们的目标是，在降低成本的同时，保持相同的渲染速度和服务质量。 这种迁移需要仔细规划和执行，因为任何配置上的失误或执行不当，都可能影响客户网站页面的加载、社交媒体的点击量，甚至可能导致搜索引擎排名下降，从而增加客户流失的风险。 你能描述下 Prerender …
原作者：刘俊夏 · 微信公众号转载页 引言 这周，我们采访了 Zsot Varga，Prerender.io 的管理者兼首席工程师。他分享了公司如何通过摆脱 AWS 平台，节省了 80 万美元，并构建了自己的基础设施来处理流量和缓存数据。他们的目标是，在降低成本的同时，保持相同的渲染速度和服务质量。 这种迁移需要仔细规划和执行，因为任何配置上的失误或执行不当，都可能影响客户网站页面的加载、社交媒体的点击量，甚至可能导致搜索引擎排名下降，从而增加客户流失的风险。 你能描述下 Prerender …
网传江西教育厅高考查分网站删库跑路
昨天，各八卦群中流传出一则《江教在线数据库删库》的消息。据称被删库的网站是江西教育系统的江教在线（www.know.edu.cn），也是江西高考成绩查询的网站 —— 出的问题是数据库被格式化，而且没有备份，甚至都没有数据库表结构，导致连拉起一套新的应用都不能。 中间的图片字是：“虽然说是他们格式化的服务器，但是我们没做异地备份”。 作为验证，访问江教在线网站提示《网站维护中》。刷新后可见一则 “迁移公告”，是否为删库请自行判断真伪。截止至发稿，公示的新域名 …
昨天，各八卦群中流传出一则《江教在线数据库删库》的消息。据称被删库的网站是江西教育系统的江教在线（www.know.edu.cn），也是江西高考成绩查询的网站 —— 出的问题是数据库被格式化，而且没有备份，甚至都没有数据库表结构，导致连拉起一套新的应用都不能。 中间的图片字是：“虽然说是他们格式化的服务器，但是我们没做异地备份”。 作为验证，访问江教在线网站提示《网站维护中》。刷新后可见一则 “迁移公告”，是否为删库请自行判断真伪。截止至发稿，公示的新域名 …
福利还是无双级BUG？网传支付宝14:40-14:45支付订单按国补减免了20%
就在刚刚，小红书，微博，V站上都有多位用户发帖反馈在今天（2025-01-16）下午 14:40 - 14:45 的支付宝订单（甚至包括转账）被 “政府减免” 20%。 V站原贴链接：https://www.v2ex.com/t/1105618 （顺带一提，截止至发稿时，这帖子已经被和谐了，但以下是截图） 看很多人都在发，只可惜自己没有这么好的运气赶上这波福利呀。以上均为网友发帖，本号不负责判断与验证真假。那么这到底是福利？还是史诗级 BUG 呢？ 从现象上来看，乱七八糟的交易都有扣减：包括美团 …
就在刚刚，小红书，微博，V站上都有多位用户发帖反馈在今天（2025-01-16）下午 14:40 - 14:45 的支付宝订单（甚至包括转账）被 “政府减免” 20%。 V站原贴链接：https://www.v2ex.com/t/1105618 （顺带一提，截止至发稿时，这帖子已经被和谐了，但以下是截图） 看很多人都在发，只可惜自己没有这么好的运气赶上这波福利呀。以上均为网友发帖，本号不负责判断与验证真假。那么这到底是福利？还是史诗级 BUG 呢？ 从现象上来看，乱七八糟的交易都有扣减：包括美团 …
花钱买罪受的大冤种：逃离云计算妙瓦底
本文来自真实咨询案例，如有雷同，纯属云厂商和钱包缘分太深。 昨天一用户来咨询，问我 PostgreSQL 分布式数据库扩展 Citus 有没有什么坑，Pigsty 支持不。我想好家伙都要上分布式了，那你这数据量应该挺大了？ 结果令人啼笑皆非，原来他并不是因为数据大到要冲破服务器柜门，而是栽在了 AWS EBS 云盘 的“杀猪盘”套路里。 捂着钱包慌忙上分布式数据库 “Citus 分布式数据库坑多吗？Pigsty 支持不？” 前两天一个用户火急火燎地跑来咨询，开口就提“Citus”。 我心想：都 …
本文来自真实咨询案例，如有雷同，纯属云厂商和钱包缘分太深。 昨天一用户来咨询，问我 PostgreSQL 分布式数据库扩展 Citus 有没有什么坑，Pigsty 支持不。我想好家伙都要上分布式了，那你这数据量应该挺大了？ 结果令人啼笑皆非，原来他并不是因为数据大到要冲破服务器柜门，而是栽在了 AWS EBS 云盘 的“杀猪盘”套路里。 捂着钱包慌忙上分布式数据库 “Citus 分布式数据库坑多吗？Pigsty 支持不？” 前两天一个用户火急火燎地跑来咨询，开口就提“Citus”。 我心想：都 …
OpenAI全球宕机复盘：K8S循环依赖
12月11日，OpenAI 出现了全球范围内的不可用故障，影响了 ChatGPT，API，Sora，Playground 和 Labs 等服务。影响范围从 12 月 11 日下午 3:16 至晚上 7:38 期间，持续时间超过四个小时，产生显著影响。 根据 OpenIA 在事后发布的故障报告，此次故障的直接原因是新部署了一套监控，压垮了 Kubernetes 控制面。然后因为控制面故障导致无法直接回滚，进一步放大的故障影响，导致了长时间的不可用。 其实这个故障和去年双十一 阿里云全球史诗故障 非 …
12月11日，OpenAI 出现了全球范围内的不可用故障，影响了 ChatGPT，API，Sora，Playground 和 Labs 等服务。影响范围从 12 月 11 日下午 3:16 至晚上 7:38 期间，持续时间超过四个小时，产生显著影响。 根据 OpenIA 在事后发布的故障报告，此次故障的直接原因是新部署了一套监控，压垮了 Kubernetes 控制面。然后因为控制面故障导致无法直接回滚，进一步放大的故障影响，导致了长时间的不可用。 其实这个故障和去年双十一 阿里云全球史诗故障 非 …
草台回旋镖：Apple Music证书过期服务中断
今天早上，网传 Apple Music 出现证书过期，导致服务中断。据称影响范围为国区 Apple Music。有趣的是，就在一个月前，苹果公司刚刚宣布了一项计划，拟将SSL/TLS安全证书的有效期逐步从当前的398天大幅缩短至2027年的45天。 结果刚提出没多久，苹果立马就忘了更新自己的证书。属实是回旋镖正中自己的脑门，蛮丢脸的。 从过期的证书来看，苹果使用的证书有效期是 180 天 / 六个月的版本。看起来似乎他们也没有设置自动更新证书的轮换程序，或者说设置了也没有生效 —— 也有一种可能 …
今天早上，网传 Apple Music 出现证书过期，导致服务中断。据称影响范围为国区 Apple Music。有趣的是，就在一个月前，苹果公司刚刚宣布了一项计划，拟将SSL/TLS安全证书的有效期逐步从当前的398天大幅缩短至2027年的45天。 结果刚提出没多久，苹果立马就忘了更新自己的证书。属实是回旋镖正中自己的脑门，蛮丢脸的。 从过期的证书来看，苹果使用的证书有效期是 180 天 / 六个月的版本。看起来似乎他们也没有设置自动更新证书的轮换程序，或者说设置了也没有生效 —— 也有一种可能 …
WordPress社区内战：论共同体划界问题
“我想直率地说：多年来，我们就像个傻子一样，他们拿着我们开发的东西大赚了一笔”。 —— Redis Labs 首席执行官 Ofer Bengal 的这句名言，成为 WordPress 社区内战，以及开源社区与商业利益之间的冲突的生动注脚。 我认为这个事件非常有代表性和启发意义 —— 当开源理想与商业利益出现冲突时，应该怎么做？一个开源项目的创始人，应当用什么样的方式来保护自己的利益，并维护社区的健康与可持续发展？这对 PostgreSQL 社区和其他开源软件社区与云厂商之间的冲突又能带来什么启示 …
“我想直率地说：多年来，我们就像个傻子一样，他们拿着我们开发的东西大赚了一笔”。 —— Redis Labs 首席执行官 Ofer Bengal 的这句名言，成为 WordPress 社区内战，以及开源社区与商业利益之间的冲突的生动注脚。 我认为这个事件非常有代表性和启发意义 —— 当开源理想与商业利益出现冲突时，应该怎么做？一个开源项目的创始人，应当用什么样的方式来保护自己的利益，并维护社区的健康与可持续发展？这对 PostgreSQL 社区和其他开源软件社区与云厂商之间的冲突又能带来什么启示 …
记一次阿里云 DCDN 加速仅 32 秒就欠了 1600 的问题处理（扯皮）。
原作者：诗语 · 微信公众号转载页 有的选就不要做互联网，不然某天你一觉睡醒就会发现自己欠了云服务商一套房。 说实话很糟心，大周末又是中秋休假第一天，难得喘口气又被阿里云的短信给烦到不行。只不过这次来的信息影响很大，连续发送了十几条短信和邮件提示我们账户欠费，然后关联的各项业务全部停止运行。 这次事件影响到了薇晓朵主服务器和全线业务系统。 凌晨 2 点多收到一条欠费短信，之后就是各项业务逐个停机，由于睡得早，一直到 9 点我醒了查看手机才发现整个平台挂了大半夜。 由于原因不明，也没睡醒，就先充 …
原作者：诗语 · 微信公众号转载页 有的选就不要做互联网，不然某天你一觉睡醒就会发现自己欠了云服务商一套房。 说实话很糟心，大周末又是中秋休假第一天，难得喘口气又被阿里云的短信给烦到不行。只不过这次来的信息影响很大，连续发送了十几条短信和邮件提示我们账户欠费，然后关联的各项业务全部停止运行。 这次事件影响到了薇晓朵主服务器和全线业务系统。 凌晨 2 点多收到一条欠费短信，之后就是各项业务逐个停机，由于睡得早，一直到 9 点我醒了查看手机才发现整个平台挂了大半夜。 由于原因不明，也没睡醒，就先充 …
云数据库：用米其林的价格，吃预制菜大锅饭
云数据库是不是天价大锅饭 RDS带来的数据库范式转变 质量安全效率成本剖析核算， 下云数据库自建，如何实战！ 太长；不看 从商业软件到开源软件再到云软件，软件行业的范式出现了嬗变，数据库自然也不例外：云厂商拿着开源数据库内核，干翻了传统企业级数据库公司。 云数据库是一门非常有利可图的生意：可以将成本不到 20¥/核·月的硬件算力卖出十倍到几十倍的溢价，轻松实现 50% - 70% 甚至更高的毛利率。 然而，随着硬件遵循摩尔定律发展，云管控软件出现开源平替，这个生意面临着严峻的挑战：云数据库服务丧 …
云数据库是不是天价大锅饭 RDS带来的数据库范式转变 质量安全效率成本剖析核算， 下云数据库自建，如何实战！ 太长；不看 从商业软件到开源软件再到云软件，软件行业的范式出现了嬗变，数据库自然也不例外：云厂商拿着开源数据库内核，干翻了传统企业级数据库公司。 云数据库是一门非常有利可图的生意：可以将成本不到 20¥/核·月的硬件算力卖出十倍到几十倍的溢价，轻松实现 50% - 70% 甚至更高的毛利率。 然而，随着硬件遵循摩尔定律发展，云管控软件出现开源平替，这个生意面临着严峻的挑战：云数据库服务丧 …
本号收到美团投诉：美团没有存储外卡CVV等敏感信息
昨天本号发了一篇《某平台CVV泄露：你的信用卡被盗刷了吗？》，随即收到了 美团的投诉，投诉内容如下所示： 经我司核实，美团系统数据库没有存储用户外卡CVV等敏感信息，不存在撞库泄露的可能。被投诉内容在未经核实的情况下，制造信息陷阱，散布网络谣言。相关媒体已发布辟谣。 先前这篇文章没有一处提到 “美团”，全是 “某互联网平台”。相关公司名称信息已经全部打码，读者无法从本文中推断出到底是哪一家互联网平台。 干这种事的大互联网平台有一些例子，比如十年前的携程就曾经这么干过《烫手的数据：携程用户CVV码 …
昨天本号发了一篇《某平台CVV泄露：你的信用卡被盗刷了吗？》，随即收到了 美团的投诉，投诉内容如下所示： 经我司核实，美团系统数据库没有存储用户外卡CVV等敏感信息，不存在撞库泄露的可能。被投诉内容在未经核实的情况下，制造信息陷阱，散布网络谣言。相关媒体已发布辟谣。 先前这篇文章没有一处提到 “美团”，全是 “某互联网平台”。相关公司名称信息已经全部打码，读者无法从本文中推断出到底是哪一家互联网平台。 干这种事的大互联网平台有一些例子，比如十年前的携程就曾经这么干过《烫手的数据：携程用户CVV码 …
某平台CVV泄露：你的信用卡被盗刷了吗？
这个十一不太平，最近某头部互联网平台曝出特大丑闻，信用卡数据库被人拖库，卡号，有效期，CVV 泄露。有许多信用卡被盗刷的苦主发现共性是都在该平台上绑了 MASTERCARD / VISA 等外卡。 这会给卡主带来重大风险和巨大的麻烦：这玩意泄漏了信用卡能轻易被盗刷，只能联系发卡机构换卡。十一长假很多人都在外面，用卡换卡都很不方便，真的是会给人整活。 这种离谱的事让人难以置信，让草台班子理论达到了新的高度。与之相比，最近《阿里云盘灾难级BUG：能看别人照片？》只能算不痛不痒的毛毛雨了。“如果”这是 …
这个十一不太平，最近某头部互联网平台曝出特大丑闻，信用卡数据库被人拖库，卡号，有效期，CVV 泄露。有许多信用卡被盗刷的苦主发现共性是都在该平台上绑了 MASTERCARD / VISA 等外卡。 这会给卡主带来重大风险和巨大的麻烦：这玩意泄漏了信用卡能轻易被盗刷，只能联系发卡机构换卡。十一长假很多人都在外面，用卡换卡都很不方便，真的是会给人整活。 这种离谱的事让人难以置信，让草台班子理论达到了新的高度。与之相比，最近《阿里云盘灾难级BUG：能看别人照片？》只能算不痛不痒的毛毛雨了。“如果”这是 …
阿里云：高可用容灾神话破灭
2024年9月10日，阿里云新加坡可用区C数据中心因锂电池爆炸导致火灾，到现在已经过去一周了，仍未完全恢复。 按照月度 SLA 定义的可用性计算规则（7天+/30天≈75%），服务可用性别说几个9了，连一个8都不剩了，而且还在进一步下降中。 当然，可用性八八九九已经是小问题了 —— 真正的问题是，放在单可用区里的数据还能不能找回来？ 截止至 09-17，关键服务如 ECS, OSS, EBS, NAS, RDS 等仍然处于异常状态 通常来说，如果只是机房小范围失火的话，问题并不会特别大，因为电源 …
2024年9月10日，阿里云新加坡可用区C数据中心因锂电池爆炸导致火灾，到现在已经过去一周了，仍未完全恢复。 按照月度 SLA 定义的可用性计算规则（7天+/30天≈75%），服务可用性别说几个9了，连一个8都不剩了，而且还在进一步下降中。 当然，可用性八八九九已经是小问题了 —— 真正的问题是，放在单可用区里的数据还能不能找回来？ 截止至 09-17，关键服务如 ECS, OSS, EBS, NAS, RDS 等仍然处于异常状态 通常来说，如果只是机房小范围失火的话，问题并不会特别大，因为电源 …
阿里云盘灾难级BUG：能看别人照片？
据网络消息，阿里云盘曝出史诗级 BUG ，可以看到其他用户云盘图片。目前流传的聊天记录显示：在阿里云盘相册中新建个文件夹，分类选择图片，就可以看到其他用户云盘图片。复现视频见B站连接： 根据聊天记录来看，要用 PC 客户端才能卡 BUG。笔者用 Mac 客户端暂时无法复现，不过有群友表示复现成功，也有群友表示人已经反馈略缩图已经紧急屏蔽了。 数据安全上的问题通常优先级远远高于数据可用性。我不知道目前这个Bug修复没有，如果没有修复，最明智的做法应该是赶紧把服务停掉。例如，瑞典互联网金融服务公司 …
据网络消息，阿里云盘曝出史诗级 BUG ，可以看到其他用户云盘图片。目前流传的聊天记录显示：在阿里云盘相册中新建个文件夹，分类选择图片，就可以看到其他用户云盘图片。复现视频见B站连接： 根据聊天记录来看，要用 PC 客户端才能卡 BUG。笔者用 Mac 客户端暂时无法复现，不过有群友表示复现成功，也有群友表示人已经反馈略缩图已经紧急屏蔽了。 数据安全上的问题通常优先级远远高于数据可用性。我不知道目前这个Bug修复没有，如果没有修复，最明智的做法应该是赶紧把服务停掉。例如，瑞典互联网金融服务公司 …
草台班子唱大戏，阿里云PG翻车记
在《云数据库是不是智商税》中，我对云数据库 RDS 的评价是：“用五星酒店价格卖给用户天价预制菜”—— 但正规的预制菜大锅饭也是能吃的 也一般吃不死人，不过最近一次发生在阿里云上的的故障让我改变了看法。 我有一位客户L，这两天跟我吐槽了一个在云数据库上遇到的离谱连环故障：一套高可用 PG RDS 集群，因为扩容个内存，主库从库都挂了，给他们折腾到凌晨。期间建议昏招迭出，给出的复盘也相当敷衍。经过客户L同意后，我将这个案例分享出来，也供大家借鉴参考品评。 事故经过：匪夷所思 内存扩容：无事生非 从 …
在《云数据库是不是智商税》中，我对云数据库 RDS 的评价是：“用五星酒店价格卖给用户天价预制菜”—— 但正规的预制菜大锅饭也是能吃的 也一般吃不死人，不过最近一次发生在阿里云上的的故障让我改变了看法。 我有一位客户L，这两天跟我吐槽了一个在云数据库上遇到的离谱连环故障：一套高可用 PG RDS 集群，因为扩容个内存，主库从库都挂了，给他们折腾到凌晨。期间建议昏招迭出，给出的复盘也相当敷衍。经过客户L同意后，我将这个案例分享出来，也供大家借鉴参考品评。 事故经过：匪夷所思 内存扩容：无事生非 从 …
我们能从网易云音乐故障中学到什么？
今天下午 14:44 左右，网易云音乐出现 不可用故障，至 17:11 分恢复。网传原因为 基础设施/云盘存储 相关问题。 故障经过 故障期间，网易云音乐客户端可以正常播放离线下载的音乐，但访问在线资源会直接提示报错，网页版则直接出现 502 服务器报错无法访问。 在此期间，网易 163门户也出现 502 服务器报错，并在一段时间后 302 重定向到移动版主站。期间也有用户反馈 网易新闻 与其他服务也受到影响。 许多用户都反馈连不上网易云音乐后，以为是自己网断了，卸了APP重装，还有以为公司 …
今天下午 14:44 左右，网易云音乐出现 不可用故障，至 17:11 分恢复。网传原因为 基础设施/云盘存储 相关问题。 故障经过 故障期间，网易云音乐客户端可以正常播放离线下载的音乐，但访问在线资源会直接提示报错，网页版则直接出现 502 服务器报错无法访问。 在此期间，网易 163门户也出现 502 服务器报错，并在一段时间后 302 重定向到移动版主站。期间也有用户反馈 网易新闻 与其他服务也受到影响。 许多用户都反馈连不上网易云音乐后，以为是自己网断了，卸了APP重装，还有以为公司 …
GitHub全站故障，又是数据库上翻的车？
早上正在刷 GitHub，突然就遇见独角兽 —— GitHub 全站挂了，甚至连主页都无法加载。截止到本文发出时，已经过去半个小时，服务还没有恢复。 根据 https://www.githubstatus.com/ 的状态页消息，本次影响范围为 GitHub 全站所有服务。 根据 GitHub Status 的消息，这次故障与数据库基础设施上的变更有关。 无状态的服务有许多恢复手段，即时挂了也比较容易恢复。而有状态的数据库一旦出问题，就是大问题。我们尚不知道是哪种数据库故障，与哪种数据库基础设施 …
早上正在刷 GitHub，突然就遇见独角兽 —— GitHub 全站挂了，甚至连主页都无法加载。截止到本文发出时，已经过去半个小时，服务还没有恢复。 根据 https://www.githubstatus.com/ 的状态页消息，本次影响范围为 GitHub 全站所有服务。 根据 GitHub Status 的消息，这次故障与数据库基础设施上的变更有关。 无状态的服务有许多恢复手段，即时挂了也比较容易恢复。而有状态的数据库一旦出问题，就是大问题。我们尚不知道是哪种数据库故障，与哪种数据库基础设施 …
数据库的“萝卜快跑”时刻已到，DBA 请下车
原作者：李令辉 · 微信公众号转载页 萝卜快跑在武汉开展运营的新闻一石激起千层浪。人类之所以在自动化的道路上不断探索，是为了克服自身的各种局限性。 减少甚至免除人类的参与，不仅能把我们从繁琐的重复性劳动里解放出来，也大大降低了操作中的事故率和运营成本。不止于出行，这个道理适合于各个行业。 众所周知，数据是 IT 行业最宝贵的资产，数据库的一点风吹草动都可能引起线上系统的剧烈震荡。所以为了安全起见，基本所有的既有数据库都配备了 DBA（数据库管理员），无论是企业独享的 DBA 还是云计算提供给客 …
原作者：李令辉 · 微信公众号转载页 萝卜快跑在武汉开展运营的新闻一石激起千层浪。人类之所以在自动化的道路上不断探索，是为了克服自身的各种局限性。 减少甚至免除人类的参与，不仅能把我们从繁琐的重复性劳动里解放出来，也大大降低了操作中的事故率和运营成本。不止于出行，这个道理适合于各个行业。 众所周知，数据是 IT 行业最宝贵的资产，数据库的一点风吹草动都可能引起线上系统的剧烈震荡。所以为了安全起见，基本所有的既有数据库都配备了 DBA（数据库管理员），无论是企业独享的 DBA 还是云计算提供给客 …
DBA不是数据库的用户，开发者才是！
原作者：瑞典马工 · 微信公众号转载页 瑞典马工是个什么玩意？他凭什么来说 DBA ？ 我的朋友冯若航是个专业 DBA，非常关注数据库行业的发展，经常发一些业内进展新闻，同时他自己也维护了一个 PostgreSQL 的发行版 Pigsty，打包了一些常用的数据库管理工具。 我从来没有管理过数据库，不知道 MySQL 5.7和 MySQL 8.0版本有哪些区别，甚至也不太会写复杂的 SQL。 冯老板认为他是一个数据库专家，我是一个数据库外行，这也是大多数朋友的意见。我本人不认同他这个定位，实际上 …
原作者：瑞典马工 · 微信公众号转载页 瑞典马工是个什么玩意？他凭什么来说 DBA ？ 我的朋友冯若航是个专业 DBA，非常关注数据库行业的发展，经常发一些业内进展新闻，同时他自己也维护了一个 PostgreSQL 的发行版 Pigsty，打包了一些常用的数据库管理工具。 我从来没有管理过数据库，不知道 MySQL 5.7和 MySQL 8.0版本有哪些区别，甚至也不太会写复杂的 SQL。 冯老板认为他是一个数据库专家，我是一个数据库外行，这也是大多数朋友的意见。我本人不认同他这个定位，实际上 …
蓝屏星期五：甲乙双方都是草台班子
最近，因为网络安全公司 CrowdStrike 发布的一个配置更新，全球范围内无数 Windows 电脑都陷入蓝屏死机状态，无数的混乱 —— 航司停飞，医院取消手术，超市、游乐园、各行各业歇业。 表：受到影响的行业领域、国家地区与相关机构（CrowdStrike导致大规模系统崩溃事件的技术分析） 涉及领域 相关机构 航空运输 美国、澳大利亚、英国、荷兰、印度、捷克、匈牙利、西班牙、中国香港、瑞士等部分航空公司出现航班延误或机场服务中断。美国达美航空、美国航空和忠实航空宣布停飞所有航班。 媒体通信 …
最近，因为网络安全公司 CrowdStrike 发布的一个配置更新，全球范围内无数 Windows 电脑都陷入蓝屏死机状态，无数的混乱 —— 航司停飞，医院取消手术，超市、游乐园、各行各业歇业。 表：受到影响的行业领域、国家地区与相关机构（CrowdStrike导致大规模系统崩溃事件的技术分析） 涉及领域 相关机构 航空运输 美国、澳大利亚、英国、荷兰、印度、捷克、匈牙利、西班牙、中国香港、瑞士等部分航空公司出现航班延误或机场服务中断。美国达美航空、美国航空和忠实航空宣布停飞所有航班。 媒体通信 …
阿里云又挂了，这次是光缆被挖断了？
根据阿里云健康看板与公告，就在刚刚，上海可用区 N 出现网络访问异常。受到影响的服务包括：OSS，ECS，RDS，K8S，OTS，DTS，KMS，PolarDB，Redis，Mongo，ElasticSearch ；从发现故障到解决用时 31 分钟，从发现故障到影响恢复用时 38 分钟。 据知情人士透露，本次故障根因是：专线被挖掘机挖断了。（小道消息，请以官网通告为准） 阿里云故障公告地址：https://status.aliyun.com/#/eventDetail?eventId=20 影响 …
根据阿里云健康看板与公告，就在刚刚，上海可用区 N 出现网络访问异常。受到影响的服务包括：OSS，ECS，RDS，K8S，OTS，DTS，KMS，PolarDB，Redis，Mongo，ElasticSearch ；从发现故障到解决用时 31 分钟，从发现故障到影响恢复用时 38 分钟。 据知情人士透露，本次故障根因是：专线被挖掘机挖断了。（小道消息，请以官网通告为准） 阿里云故障公告地址：https://status.aliyun.com/#/eventDetail?eventId=20 影响 …