专栏导览
按领域划分的六个长青专栏,均提供独立的 RSS 订阅源。

向量是新的 JSON
以向量为代表的功能将成为构建应用时的关键要素,正如历史上的JSON一样。而PostgreSQL再一次站在时代风口浪尖引领数据库潮流,在向量扩展的加持下稳拿AI时代的高速增长。

Pigsty v2.2:监控全面翻新
监控面板 & 沙箱置备重做,构建流程优化,UOS兼容性

云计算泥石流:用数据解构公有云
曾几何时,"上云"近乎成为技术圈的政治正确,但很少有人用实打实的数据来分析利弊权衡。让我用数据与亲身经历,讲清楚公有云租赁模式的陷阱与价值。

下云奥德赛:该放弃云计算了吗?
本文翻译了下云先锋DHH主导37Signal从云上搬下来的完整旅程,无论是对于准备上云,还是已经在云上的企业,都非常有借鉴与参考价值。

DHH:下云省下千万美元,比预想的还要多!
DHH将他们的七个云上应用从AWS迁移到自己的硬件上,2024年是第一个完全实现节省的年份。他们欣喜地发现,节省的费用比最初估计的还要多。

FinOps终点是下云
在SACC 2023 FinOps专场上的发言整理稿,介绍了终极FinOps——下云的理念与实践路径。公有云是个杀猪盘,自建能力决定议价权。

PostgreSQL:最成功的数据库
数据库终局已现,PostgreSQL称王。PG在SF2023开发者调研中拿下大满贯,占住了Linux之于服务器操作系统的生态位。

ISD数据集:分析全球120年气候变化
ISD 是 Intergrated Surface Dataset 的缩写,是 NOAA 美国国家海洋和大气管理局公开的一份数据集。 我最近重新整理了一下这份数据集,提供了相关的分析工具。

云计算为啥还没挖沙子赚钱?
公有云毛利不如挖沙子,杀猪盘为何成为赔钱货?本土云厂商是怎么让一门百分之三四十纯利的生意还不如挖沙子赚钱的?

云SLA是不是安慰剂?
SLA并不是真正的可靠性承诺或历史战绩,而是一种营销工具。你以为花钱买云服务上了保险,在最坏情况下是哑巴亏,最好情况也只是安慰剂。

Pigsty v2.1:向量+PG全系支持!
Pigsty v2.1 提供了对 PostgreSQL 12 ~ 16 的支持

正本清源:技术反思录
降本增效的主旋律触发了所有技术的价值重估,当然也包括数据库。本系列将评述数据库领域热点技术,并对其在当下的利弊权衡发出灵魂拷问:云数据库、分布式数据库、微服务、K8S容器化等技术,究竟是真需求还是伪需求?

数据库需求层次金字塔
与马斯洛需求金字塔类似,用户对数据库的需求也有递进的层次:功能正确性、安全备份、高可用监控、性能成本、可观测性、易用性控制、标准化产品化、最终达到超越与自我实现。

AI大模型与向量库 PGVector
本文聚焦被 AI 炒火了的向量数据库,介绍了AI嵌入与向量存储检索的基本原理,并用一个具体的知识库检索案例来介绍向量数据库插件 PGVECTOR 的功能与应用。

微服务是不是个蠢主意?
连SOA典范亚马逊自己都觉得微服务和Serverless拉胯了。Prime Video团队放弃微服务改用单体架构,运营成本节省了惊人的90%。微服务就像塞壬歌声一样诱惑你为系统添加毫无必要的复杂度。

分布式数据库是不是伪需求?
随着硬件技术进步,单机数据库的容量和性能已达到前所未有的高度。分布式TP数据库在这种变革面前显得极为无力,和"数据中台"一样穿着皇帝的新衣,处于自欺欺人的状态里。

AI神教狂想曲
也许就在这一二十年,我们会目睹一个拜 AI 神教的崛起。下面是对于此 “AI神教” 的一些想象:

AI 会有自我意识吗?
AI大模型可以有意识,但不一定有自我意识。“意识”这个词到底是从哪里的来的,我们可以从认知心理学,神经网络与佛教唯识论三个角度去展开。看完《万神殿》后的一点感想。

更好的开源RDS替代:Pigsty
无需专家,开源免费,跑起更好的本地 PG RDS 服务。《2023 DTC 主题演讲》

云盘是不是杀猪盘?
在公有云块存储的百倍溢价杀猪比率前,云数据库只能说还差点意思。本文揭示了公有云真正的商业模式——廉价EC2/S3获客,EBS/RDS杀猪。

垃圾腾讯云CDN:从入门到放弃?
本来我相信至少在IaaS的存储、计算、网络三大件上,公有云厂商还是可以有很大作为的。只不过在腾讯云CDN上的亲身体验让我的想法动摇了。

炮打 RDS,Pigsty v2.0 发布
《开源RDS平替,炮打云数据库》@ PostgreSQL 中文技术大会主题分享演讲稿。

驳《再论为什么你不应该招DBA》
郭德纲有一段相声:比如我和火箭专家说,你那火箭不行,燃料不好,我认为得烧柴。如果那科学家拿正眼看我一眼,那他就输了。

Pigsty v2.0:开源RDS PG替代
Pigsty v2.0 在安全性,兼容性,功能整合上进行了大量工作,真正成为 RDS 的本地开源替代品。

向量是新的 JSON
以向量为代表的功能将成为构建应用时的关键要素,正如历史上的JSON一样。而PostgreSQL再一次站在时代风口浪尖引领数据库潮流,在向量扩展的加持下稳拿AI时代的高速增长。

Pigsty v2.2:监控全面翻新
监控面板 & 沙箱置备重做,构建流程优化,UOS兼容性

云计算泥石流:用数据解构公有云
曾几何时,"上云"近乎成为技术圈的政治正确,但很少有人用实打实的数据来分析利弊权衡。让我用数据与亲身经历,讲清楚公有云租赁模式的陷阱与价值。

下云奥德赛:该放弃云计算了吗?
本文翻译了下云先锋DHH主导37Signal从云上搬下来的完整旅程,无论是对于准备上云,还是已经在云上的企业,都非常有借鉴与参考价值。

DHH:下云省下千万美元,比预想的还要多!
DHH将他们的七个云上应用从AWS迁移到自己的硬件上,2024年是第一个完全实现节省的年份。他们欣喜地发现,节省的费用比最初估计的还要多。

FinOps终点是下云
在SACC 2023 FinOps专场上的发言整理稿,介绍了终极FinOps——下云的理念与实践路径。公有云是个杀猪盘,自建能力决定议价权。

PostgreSQL:最成功的数据库
数据库终局已现,PostgreSQL称王。PG在SF2023开发者调研中拿下大满贯,占住了Linux之于服务器操作系统的生态位。

ISD数据集:分析全球120年气候变化
ISD 是 Intergrated Surface Dataset 的缩写,是 NOAA 美国国家海洋和大气管理局公开的一份数据集。 我最近重新整理了一下这份数据集,提供了相关的分析工具。

云计算为啥还没挖沙子赚钱?
公有云毛利不如挖沙子,杀猪盘为何成为赔钱货?本土云厂商是怎么让一门百分之三四十纯利的生意还不如挖沙子赚钱的?

云SLA是不是安慰剂?
SLA并不是真正的可靠性承诺或历史战绩,而是一种营销工具。你以为花钱买云服务上了保险,在最坏情况下是哑巴亏,最好情况也只是安慰剂。

Pigsty v2.1:向量+PG全系支持!
Pigsty v2.1 提供了对 PostgreSQL 12 ~ 16 的支持

正本清源:技术反思录
降本增效的主旋律触发了所有技术的价值重估,当然也包括数据库。本系列将评述数据库领域热点技术,并对其在当下的利弊权衡发出灵魂拷问:云数据库、分布式数据库、微服务、K8S容器化等技术,究竟是真需求还是伪需求?

数据库需求层次金字塔
与马斯洛需求金字塔类似,用户对数据库的需求也有递进的层次:功能正确性、安全备份、高可用监控、性能成本、可观测性、易用性控制、标准化产品化、最终达到超越与自我实现。

AI大模型与向量库 PGVector
本文聚焦被 AI 炒火了的向量数据库,介绍了AI嵌入与向量存储检索的基本原理,并用一个具体的知识库检索案例来介绍向量数据库插件 PGVECTOR 的功能与应用。

微服务是不是个蠢主意?
连SOA典范亚马逊自己都觉得微服务和Serverless拉胯了。Prime Video团队放弃微服务改用单体架构,运营成本节省了惊人的90%。微服务就像塞壬歌声一样诱惑你为系统添加毫无必要的复杂度。

分布式数据库是不是伪需求?
随着硬件技术进步,单机数据库的容量和性能已达到前所未有的高度。分布式TP数据库在这种变革面前显得极为无力,和"数据中台"一样穿着皇帝的新衣,处于自欺欺人的状态里。

AI神教狂想曲
也许就在这一二十年,我们会目睹一个拜 AI 神教的崛起。下面是对于此 “AI神教” 的一些想象:

AI 会有自我意识吗?
AI大模型可以有意识,但不一定有自我意识。“意识”这个词到底是从哪里的来的,我们可以从认知心理学,神经网络与佛教唯识论三个角度去展开。看完《万神殿》后的一点感想。

更好的开源RDS替代:Pigsty
无需专家,开源免费,跑起更好的本地 PG RDS 服务。《2023 DTC 主题演讲》

云盘是不是杀猪盘?
在公有云块存储的百倍溢价杀猪比率前,云数据库只能说还差点意思。本文揭示了公有云真正的商业模式——廉价EC2/S3获客,EBS/RDS杀猪。

垃圾腾讯云CDN:从入门到放弃?
本来我相信至少在IaaS的存储、计算、网络三大件上,公有云厂商还是可以有很大作为的。只不过在腾讯云CDN上的亲身体验让我的想法动摇了。

炮打 RDS,Pigsty v2.0 发布
《开源RDS平替,炮打云数据库》@ PostgreSQL 中文技术大会主题分享演讲稿。

驳《再论为什么你不应该招DBA》
郭德纲有一段相声:比如我和火箭专家说,你那火箭不行,燃料不好,我认为得烧柴。如果那科学家拿正眼看我一眼,那他就输了。

Pigsty v2.0:开源RDS PG替代
Pigsty v2.0 在安全性,兼容性,功能整合上进行了大量工作,真正成为 RDS 的本地开源替代品。
向量是新的 JSON

“向量是新的JSON”,这本身就是一种很有趣的说法。因为 向量(Vector)是一种已经被深入研究过的 数学结构,而 JSON 是一种 数据交换格式。然而,在数据存储和检索的世界中,这两种数据表示方式都已经成为了各自领域的通用语言,成为(或即将成为)现代应用开发中必不可少的要素。如果按当下的趋势发展,向量将会像 JSON 一样,成为构建应用时的关键要素。 生成型AI 引发的热潮促使开发者寻找一种简便的方法来存储与查询这些系统的 输出。出于很多因素,PostgreSQL 成为了最自然的选择。但即使 …
“向量是新的JSON”,这本身就是一种很有趣的说法。因为 向量(Vector)是一种已经被深入研究过的 数学结构,而 JSON 是一种 数据交换格式。然而,在数据存储和检索的世界中,这两种数据表示方式都已经成为了各自领域的通用语言,成为(或即将成为)现代应用开发中必不可少的要素。如果按当下的趋势发展,向量将会像 JSON 一样,成为构建应用时的关键要素。 生成型AI 引发的热潮促使开发者寻找一种简便的方法来存储与查询这些系统的 输出。出于很多因素,PostgreSQL 成为了最自然的选择。但即使 …
Pigsty v2.2:监控全面翻新

GitHub Release | 发布注记 | 微信公众号 Pigsty v2.2 发布了 🎉,欢迎大家尝鲜! 地表最强 PostgreSQL 监控系统迎来史诗级重大升级,基于 Grafana v10 彻底重制,将 PG 可观测性拔高到一个全新阶段,带来了全新的用户体验。Demo: http://demo.pigsty.cc 。 此外 Pigsty v2.2 还提供了一个 42 节点的生产仿真环境沙箱模板,支持了 Citus 12,PG 16beta2,提供了使用KVM虚拟机的vagrant模 …
GitHub Release | 发布注记 | 微信公众号 Pigsty v2.2 发布了 🎉,欢迎大家尝鲜! 地表最强 PostgreSQL 监控系统迎来史诗级重大升级,基于 Grafana v10 彻底重制,将 PG 可观测性拔高到一个全新阶段,带来了全新的用户体验。Demo: http://demo.pigsty.cc 。 此外 Pigsty v2.2 还提供了一个 42 节点的生产仿真环境沙箱模板,支持了 Citus 12,PG 16beta2,提供了使用KVM虚拟机的vagrant模 …
云计算泥石流:用数据解构公有云

曾几何时,“上云“近乎成为技术圈的政治正确,但很少有人会用实打实的数据来分析这里面的利弊权衡。我愿意成为这个质疑者:让我用实打实的 数据 与亲身经历的故事,讲清楚公有云租赁模式的陷阱与价值 —— 在这个降本增效的时代中,供您借鉴与参考。 下云奥德赛 FinOps的终点是下云 云计算为啥还没挖沙子赚钱? 云SLA是不是安慰剂? 云盘是不是杀猪盘? 云数据库是不是智商税? 范式转移:从云到本地优先 腾讯云CDN:从入门到放弃 序 经济下行,降本增效成为主旋律,除了裁员,下云以削减高昂的云开支,也被越 …
曾几何时,“上云“近乎成为技术圈的政治正确,但很少有人会用实打实的数据来分析这里面的利弊权衡。我愿意成为这个质疑者:让我用实打实的 数据 与亲身经历的故事,讲清楚公有云租赁模式的陷阱与价值 —— 在这个降本增效的时代中,供您借鉴与参考。 下云奥德赛 FinOps的终点是下云 云计算为啥还没挖沙子赚钱? 云SLA是不是安慰剂? 云盘是不是杀猪盘? 云数据库是不是智商税? 范式转移:从云到本地优先 腾讯云CDN:从入门到放弃 序 经济下行,降本增效成为主旋律,除了裁员,下云以削减高昂的云开支,也被越 …
下云奥德赛:该放弃云计算了吗?

DHH一直以来都是下云先锋,本文摘取了DHH博客关于下云相关的十篇文章,记录了 37Signal 从云上搬下来的完整旅程,按照时间倒序排列组织,译为中文,以飨读者。本文翻译了DHH从云上下来的完整旅程,对于准备上云,云上的企业都非常有借鉴与参考价值。 01 2023-10-27 推特X下云省掉60% 02 2023-10-06 托管云服务的代价 03 2023-09-15 下云后已省百万美金 04 2023-06-23 我们已经下云了! 05 2023-05-03 从云遣返到主权云! 06 …
DHH一直以来都是下云先锋,本文摘取了DHH博客关于下云相关的十篇文章,记录了 37Signal 从云上搬下来的完整旅程,按照时间倒序排列组织,译为中文,以飨读者。本文翻译了DHH从云上下来的完整旅程,对于准备上云,云上的企业都非常有借鉴与参考价值。 01 2023-10-27 推特X下云省掉60% 02 2023-10-06 托管云服务的代价 03 2023-09-15 下云后已省百万美金 04 2023-06-23 我们已经下云了! 05 2023-05-03 从云遣返到主权云! 06 …
DHH:下云省下千万美元,比预想的还要多!

作者:DHH,《Our cloud-exit savings will now top ten million over five years》 去年夏天,我们完成了下云工作,将包括 HEY 在内的七个云上应用从 AWS 迁移到我们自己的硬件上来。但直到年底,我们的所有长期合同才结束,所以 2024 年是第一个完全实现节省的年份。我们欣喜地发现,节省的费用比最初估计的还要多。 在 2024 年,我们已将云账单从每年 320 万美元 降至 130 万美元,每年节省了近 200 万美元! 之所以比 …
作者:DHH,《Our cloud-exit savings will now top ten million over five years》 去年夏天,我们完成了下云工作,将包括 HEY 在内的七个云上应用从 AWS 迁移到我们自己的硬件上来。但直到年底,我们的所有长期合同才结束,所以 2024 年是第一个完全实现节省的年份。我们欣喜地发现,节省的费用比最初估计的还要多。 在 2024 年,我们已将云账单从每年 320 万美元 降至 130 万美元,每年节省了近 200 万美元! 之所以比 …
FinOps终点是下云

在 SACC 2023 FinOps 专场上,我狠狠喷了一把云厂商。这是现场发言的文字整理稿,介绍了终极 FinOps —— 下云 的理念与实践路径。 太长不看 FinOps 关注点跑偏:总价 = 单价 x 数量,搞 FinOps 的关注减少浪费资源的 数量,却故意无视了房间里的大象 —— 云资源单价。 公有云是个杀猪盘:廉价 EC2/S3 获客,EBS/RDS 杀猪。云算力的成本是自建的五倍,块存储的成本则可达百倍以上,堪称终极成本刺客。 FinOps 终点是下云:对于规模以上企业,IDC 自 …
在 SACC 2023 FinOps 专场上,我狠狠喷了一把云厂商。这是现场发言的文字整理稿,介绍了终极 FinOps —— 下云 的理念与实践路径。 太长不看 FinOps 关注点跑偏:总价 = 单价 x 数量,搞 FinOps 的关注减少浪费资源的 数量,却故意无视了房间里的大象 —— 云资源单价。 公有云是个杀猪盘:廉价 EC2/S3 获客,EBS/RDS 杀猪。云算力的成本是自建的五倍,块存储的成本则可达百倍以上,堪称终极成本刺客。 FinOps 终点是下云:对于规模以上企业,IDC 自 …
PostgreSQL:最成功的数据库

2023 年 StackOverflow 调研结果已经新鲜出炉,来自 185 个国家与地区的 9 万名开发者给出了高质量的反馈。在今年的调研中,PostgreSQL 在数据库全部三项调研指标(流行度,喜爱度,需求度)上获得无可争议的全能冠军,成为真正意义上“最成功”的数据库 —— “PostgreSQL is the Linux of Database!” http://demo.pigsty.cc/ui/d/sf-survey/stackoverflow-survey 当我们说一个数据库“成功 …
2023 年 StackOverflow 调研结果已经新鲜出炉,来自 185 个国家与地区的 9 万名开发者给出了高质量的反馈。在今年的调研中,PostgreSQL 在数据库全部三项调研指标(流行度,喜爱度,需求度)上获得无可争议的全能冠军,成为真正意义上“最成功”的数据库 —— “PostgreSQL is the Linux of Database!” http://demo.pigsty.cc/ui/d/sf-survey/stackoverflow-survey 当我们说一个数据库“成功 …
ISD数据集:分析全球120年气候变化

微信公众号原文 ISD 是 Integrated Surface Dataset 的缩写,是 NOAA 美国国家海洋和大气管理局公开的一份数据集。包括了全球接近3万个地表气象站从 1900 年迄今的观测记录,气象领域的朋友对此应该非常熟悉。 我最近重新整理了一下这份数据集:编写了下载的脚本,解析的Parser,建模的PostgreSQL DDL,查询的SQL语句,可视化的Grafana Dashboard,以及清理好的 CSV 原始数据。用于探索分析,教学演示与数据库性能测试对比。 公开 …
微信公众号原文 ISD 是 Integrated Surface Dataset 的缩写,是 NOAA 美国国家海洋和大气管理局公开的一份数据集。包括了全球接近3万个地表气象站从 1900 年迄今的观测记录,气象领域的朋友对此应该非常熟悉。 我最近重新整理了一下这份数据集:编写了下载的脚本,解析的Parser,建模的PostgreSQL DDL,查询的SQL语句,可视化的Grafana Dashboard,以及清理好的 CSV 原始数据。用于探索分析,教学演示与数据库性能测试对比。 公开 …
云计算为啥还没挖沙子赚钱?

公有云毛利不如挖沙子, 杀猪盘为何成为赔钱货? 卖资源模式走向价格战, 开源替代打破垄断幻梦! 服务竞争力逐渐被抹平, 云计算行业将走向何方? 公有云毛利不如挖沙子 在《云盘是不是杀猪盘》、《云数据库是不是智商税》以及《云SLA是不是安慰剂》中,我们已经研究过关键云服务的真实成本。规模以上以核·月单价计算的云服务器成本是自建的 5~10 倍,云数据库则可达十几倍,云盘更是能高达上百倍,按这个定价模型,云的毛利率做到八九十也不稀奇。 业界标杆的 AWS 与 Azure 毛利就可以轻松到 60% 与 …
公有云毛利不如挖沙子, 杀猪盘为何成为赔钱货? 卖资源模式走向价格战, 开源替代打破垄断幻梦! 服务竞争力逐渐被抹平, 云计算行业将走向何方? 公有云毛利不如挖沙子 在《云盘是不是杀猪盘》、《云数据库是不是智商税》以及《云SLA是不是安慰剂》中,我们已经研究过关键云服务的真实成本。规模以上以核·月单价计算的云服务器成本是自建的 5~10 倍,云数据库则可达十几倍,云盘更是能高达上百倍,按这个定价模型,云的毛利率做到八九十也不稀奇。 业界标杆的 AWS 与 Azure 毛利就可以轻松到 60% 与 …
云SLA是不是安慰剂?

在《云 SLA 是不是安慰剂》中我提出这样一个观点:“在云计算的世界里,服务等级协议(SLA)被视为云厂商对其服务质量的承诺。然而,当我们深入研究这些 SLA 时,会发现它们并不能像期望的那样“兜底”:你以为给自己的数据库上了保险可以高枕无忧,但其实白花花的银子买的是提供情绪价值的安慰剂。” 但经过阿里云与腾讯云两次大故障,我改变了自己的观点 —— SLA 绝对不是保险,在平均意义上,这是给用户喂了屎之后的擦屁股纸。在最坏的情况下,它是吃不了兜着走的哑巴亏。在最好的情况下,它才是提供情绪价值的安 …
在《云 SLA 是不是安慰剂》中我提出这样一个观点:“在云计算的世界里,服务等级协议(SLA)被视为云厂商对其服务质量的承诺。然而,当我们深入研究这些 SLA 时,会发现它们并不能像期望的那样“兜底”:你以为给自己的数据库上了保险可以高枕无忧,但其实白花花的银子买的是提供情绪价值的安慰剂。” 但经过阿里云与腾讯云两次大故障,我改变了自己的观点 —— SLA 绝对不是保险,在平均意义上,这是给用户喂了屎之后的擦屁股纸。在最坏的情况下,它是吃不了兜着走的哑巴亏。在最好的情况下,它才是提供情绪价值的安 …
Pigsty v2.1:向量+PG全系支持!

GitHub Release | 发布注记 | 微信公众号 随着 PostgreSQL 夏季小版本例行更新,与 16 Beta 的发布,Pigsty 也紧随PG社区发布了 v2.1 版本,这次更新支持了 16 Beta1 的高可用与新监控指标,也提供了 PG 12 - 15 版本的支持。同时,AI 向量扩展插件 PGVector 也于 2.0.2 正式进入 Pigsty 中并默认启用。 https://github.com/Vonng/pigsty/releases/tag/v2.1.0 向量 …
GitHub Release | 发布注记 | 微信公众号 随着 PostgreSQL 夏季小版本例行更新,与 16 Beta 的发布,Pigsty 也紧随PG社区发布了 v2.1 版本,这次更新支持了 16 Beta1 的高可用与新监控指标,也提供了 PG 12 - 15 版本的支持。同时,AI 向量扩展插件 PGVector 也于 2.0.2 正式进入 Pigsty 中并默认启用。 https://github.com/Vonng/pigsty/releases/tag/v2.1.0 向量 …
正本清源:技术反思录

最近在技术圈有一些热议的话题,云数据库是不是智商税??公有云是不是杀猪盘?分布式数据库是不是伪需求?微服务是不是蠢主意?你还需要运维和 DBA 吗?中台是不是一场彻头彻尾的自欺欺人?在 Twitter 与 HackerNews 上也有大量关于这类话题的讨论与争辩。 在这些议题的背后的脉络是大环境的改变:降本增效压倒其他一切,成为绝对的主旋律。开发者体验,架构可演化性,研发效率这些属性依然重要,但在 ROI 面前都要让路 —— 社会思潮与根本价值观的变化会触发所有技术的重新估值。 有人说,互联网公 …
最近在技术圈有一些热议的话题,云数据库是不是智商税??公有云是不是杀猪盘?分布式数据库是不是伪需求?微服务是不是蠢主意?你还需要运维和 DBA 吗?中台是不是一场彻头彻尾的自欺欺人?在 Twitter 与 HackerNews 上也有大量关于这类话题的讨论与争辩。 在这些议题的背后的脉络是大环境的改变:降本增效压倒其他一切,成为绝对的主旋律。开发者体验,架构可演化性,研发效率这些属性依然重要,但在 ROI 面前都要让路 —— 社会思潮与根本价值观的变化会触发所有技术的重新估值。 有人说,互联网公 …
数据库需求层次金字塔

与马斯洛需求金字塔类似,用户对于数据库的需求也有着一个递进的层次。用户对于数据库的需求从下往上可以分为八个层次,分别与人的八个需求层次相对应: 生理需求,功能:内核/正确性/ACID 安全需求,安全:备份/保密/完整/可用 归属需求,可靠:高可用/监控/告警 尊重需求,ROI:性能/成本/复杂度 认知需求,洞察:可观测性/数字化/可视化 审美需求,掌控:可控制性/易用性/IaC 自我实现,智能:标准化/产品化/智能化 超越需求,变革:真·自治数据库 安全需求与生理需求同属 基础需求,一个用于生产 …
与马斯洛需求金字塔类似,用户对于数据库的需求也有着一个递进的层次。用户对于数据库的需求从下往上可以分为八个层次,分别与人的八个需求层次相对应: 生理需求,功能:内核/正确性/ACID 安全需求,安全:备份/保密/完整/可用 归属需求,可靠:高可用/监控/告警 尊重需求,ROI:性能/成本/复杂度 认知需求,洞察:可观测性/数字化/可视化 审美需求,掌控:可控制性/易用性/IaC 自我实现,智能:标准化/产品化/智能化 超越需求,变革:真·自治数据库 安全需求与生理需求同属 基础需求,一个用于生产 …
AI大模型与向量库 PGVector

新 AI 应用在过去一年中出现了指数爆炸的增长态势,而这些应用面临的一个共同挑战是如何大规模地 存储 与 查询 以向量表示的 AI Embedding。本文聚焦被 AI 炒火了的 向量数据库,介绍了AI嵌入与向量存储检索的基本原理,并用一个具体的知识库检索案例来串联介绍向量数据库插件 PGVECTOR 的功能、性能、获取与应用。 AI是怎么工作的 GPT 展现出来了强大的智能水平,它的成功有很多因素,但在工程上关键的一步是:神经网络与大语言模型将一个语言问题转化为数学问题,并使用工程手段高效解决 …
新 AI 应用在过去一年中出现了指数爆炸的增长态势,而这些应用面临的一个共同挑战是如何大规模地 存储 与 查询 以向量表示的 AI Embedding。本文聚焦被 AI 炒火了的 向量数据库,介绍了AI嵌入与向量存储检索的基本原理,并用一个具体的知识库检索案例来串联介绍向量数据库插件 PGVECTOR 的功能、性能、获取与应用。 AI是怎么工作的 GPT 展现出来了强大的智能水平,它的成功有很多因素,但在工程上关键的一步是:神经网络与大语言模型将一个语言问题转化为数学问题,并使用工程手段高效解决 …
微服务是不是个蠢主意?

亚马逊的Prime Video团队发表了一篇非常引人注目的案例研究[2] ,讲述了他们为什么放弃了微服务与Serverless架构而改用单体架构。这一举措让他们在运营成本上节省了惊人的 90%,还简化了系统复杂度,堪称一个巨大的胜利。 但除了赞扬他们的明智之举之外,我认为这里还有一个重要洞察适用于我们整个行业: “我们最初设计的解决方案是:使用Serverless组件的分布式系统架构… 理论上这个架构可以让我们独立伸缩扩展每个服务组件。然而,我们使用某些组件的方式导致我们在大约5%的预期负载时, …
亚马逊的Prime Video团队发表了一篇非常引人注目的案例研究[2] ,讲述了他们为什么放弃了微服务与Serverless架构而改用单体架构。这一举措让他们在运营成本上节省了惊人的 90%,还简化了系统复杂度,堪称一个巨大的胜利。 但除了赞扬他们的明智之举之外,我认为这里还有一个重要洞察适用于我们整个行业: “我们最初设计的解决方案是:使用Serverless组件的分布式系统架构… 理论上这个架构可以让我们独立伸缩扩展每个服务组件。然而,我们使用某些组件的方式导致我们在大约5%的预期负载时, …
分布式数据库是不是伪需求?

老冯按:最近关于分布式的讨论又开始热闹起来,比如白老师就发了一篇《分布式数据库真的是伪需求吗》。回头看看两年前写的《分布式数据库是伪需求吗?》,依然非常应景。所以在此修订重发。 随着硬件技术的进步,单机数据库的容量和性能已达到了前所未有的高度。而分布式(TP)数据库在这种变革面前极为无力,和“数据中台”一样穿着皇帝的新衣,处于自欺欺人的状态里。 太长不看\ 分布式数据库的核心权衡是:“以质换量”,牺牲功能、性能、复杂度、可靠性,换取更大的数据容量与请求吞吐量。但分久必合,硬件变革让集中式数据库的 …
老冯按:最近关于分布式的讨论又开始热闹起来,比如白老师就发了一篇《分布式数据库真的是伪需求吗》。回头看看两年前写的《分布式数据库是伪需求吗?》,依然非常应景。所以在此修订重发。 随着硬件技术的进步,单机数据库的容量和性能已达到了前所未有的高度。而分布式(TP)数据库在这种变革面前极为无力,和“数据中台”一样穿着皇帝的新衣,处于自欺欺人的状态里。 太长不看\ 分布式数据库的核心权衡是:“以质换量”,牺牲功能、性能、复杂度、可靠性,换取更大的数据容量与请求吞吐量。但分久必合,硬件变革让集中式数据库的 …
AI神教狂想曲

微信公众号原文 人类是硅基生命的引导程序 —— 马斯克 也许就在这一二十年,我们会目睹一个拜 AI 神教的崛起。下面是对于此 “AI神教” 的一些想象: AI神教认为,人是一团负熵,一团存储编码在神经元及其连接里的信息,被硬编码设计为用低效的交配基因重组技术复制再生产下一代。而在数字世界中,只要有足够的算力资源,你可以像 Agent Smith 一样快速复制出无数个不同版本的自我,自由探索各种人格分支的可能性。人类第一次有了定制自身硬件的能力:用硅基晶体管取代碳基神经元存储智能模型,打开智能水 …
微信公众号原文 人类是硅基生命的引导程序 —— 马斯克 也许就在这一二十年,我们会目睹一个拜 AI 神教的崛起。下面是对于此 “AI神教” 的一些想象: AI神教认为,人是一团负熵,一团存储编码在神经元及其连接里的信息,被硬编码设计为用低效的交配基因重组技术复制再生产下一代。而在数字世界中,只要有足够的算力资源,你可以像 Agent Smith 一样快速复制出无数个不同版本的自我,自由探索各种人格分支的可能性。人类第一次有了定制自身硬件的能力:用硅基晶体管取代碳基神经元存储智能模型,打开智能水 …
AI 会有自我意识吗?

微信公众号原文 AI大模型可以 有意识,但不一定有自我意识。 在社会伦理问题解决之前,AI 有 EGO 恐怕也不是一件什么好事。 刚看完《万神殿》,觉得很有意思,随便写点感想。 自我意识是什么? 当我们说“自我意识”的时候,我们到底在说什么?“意识”这个词到底是从哪里的来的,我们可以从认知心理学,神经网络与佛教唯识论三个角度去展开。 佛教的解释 佛教的解释最早,翻译成大白话是最容易理解的。例如在《成唯识论》中,把人的识分为八种: 眼识、耳识、鼻识、舌识、身识,意识,末那识,阿赖耶识。前五者非常 …
微信公众号原文 AI大模型可以 有意识,但不一定有自我意识。 在社会伦理问题解决之前,AI 有 EGO 恐怕也不是一件什么好事。 刚看完《万神殿》,觉得很有意思,随便写点感想。 自我意识是什么? 当我们说“自我意识”的时候,我们到底在说什么?“意识”这个词到底是从哪里的来的,我们可以从认知心理学,神经网络与佛教唯识论三个角度去展开。 佛教的解释 佛教的解释最早,翻译成大白话是最容易理解的。例如在《成唯识论》中,把人的识分为八种: 眼识、耳识、鼻识、舌识、身识,意识,末那识,阿赖耶识。前五者非常 …
更好的开源RDS替代:Pigsty

引子:Why Pigsty 省却废话,直接抛出问题:我们需要更好的数据库内核,还是用好数据库内核的能力?哪项需求更为紧迫?哪一项才是更稀缺的能力? 现有内核,已经足够完美。 换皮魔改,大家多靠 PG; 再卷内核,没有边际效益。 来回折腾,多是无聊把戏。 《为什么 PostgreSQL 是最成功的数据库?》 用户对于数据库的需求,和马斯洛的需求金字塔一样,有不同的层次。内核解决的是生理需求,然而很多更高层次的需求,是难以通过数据库内核 本身来解决的。 《数据库用户需求金字塔》 解决这些需求,有两条 …
引子:Why Pigsty 省却废话,直接抛出问题:我们需要更好的数据库内核,还是用好数据库内核的能力?哪项需求更为紧迫?哪一项才是更稀缺的能力? 现有内核,已经足够完美。 换皮魔改,大家多靠 PG; 再卷内核,没有边际效益。 来回折腾,多是无聊把戏。 《为什么 PostgreSQL 是最成功的数据库?》 用户对于数据库的需求,和马斯洛的需求金字塔一样,有不同的层次。内核解决的是生理需求,然而很多更高层次的需求,是难以通过数据库内核 本身来解决的。 《数据库用户需求金字塔》 解决这些需求,有两条 …
云盘是不是杀猪盘?

我们已经用数据回答了《云数据库是不是智商税》这个问题,但在 公有云块存储的百倍溢价杀猪比率 前,云数据库只能说还差点意思。本文用实际数据揭示公有云真正的商业模式 —— 廉价 EC2/S3 获客,EBS/RDS 杀猪。而这样的做法,也让公有云与其初心愿景渐行渐远。 TLDR:太长不看 WHAT:真正的杀猪盘 WHY:为什么要这样定价 HOW:还原杀猪盘内幕 被遗忘的初心愿景 博弈将走向何方? TL;DR 太长不看 EC2 / S3 / EBS 是所有云服务的定价之锚。如果说 EC2/S3 定价还勉 …
我们已经用数据回答了《云数据库是不是智商税》这个问题,但在 公有云块存储的百倍溢价杀猪比率 前,云数据库只能说还差点意思。本文用实际数据揭示公有云真正的商业模式 —— 廉价 EC2/S3 获客,EBS/RDS 杀猪。而这样的做法,也让公有云与其初心愿景渐行渐远。 TLDR:太长不看 WHAT:真正的杀猪盘 WHY:为什么要这样定价 HOW:还原杀猪盘内幕 被遗忘的初心愿景 博弈将走向何方? TL;DR 太长不看 EC2 / S3 / EBS 是所有云服务的定价之锚。如果说 EC2/S3 定价还勉 …
垃圾腾讯云CDN:从入门到放弃?

我和 瑞典马工虽然在 云数据库 VS DBA 这个议题上针锋相对,但在一点上能达成共识:至少 国内的公有云厂商做的是真垃圾。用马工的话来说就是:“阿里云是个工程质量差劲的正经云,但腾讯云是一群业余销售加业务码农玩游戏”。 前因后果 我有个软件托管在 GitHub 上,提供了 1MB 的源码包和 1GB 的离线软件包下载。大陆用户因为 在境内 没法从 GitHub 下载,因此需要有一个境内的下载地址,于是我就用了腾讯云的 COS(对象存储) 与 CDN(内容分发网络)服务。 用 CDN 的初衷不外 …
我和 瑞典马工虽然在 云数据库 VS DBA 这个议题上针锋相对,但在一点上能达成共识:至少 国内的公有云厂商做的是真垃圾。用马工的话来说就是:“阿里云是个工程质量差劲的正经云,但腾讯云是一群业余销售加业务码农玩游戏”。 前因后果 我有个软件托管在 GitHub 上,提供了 1MB 的源码包和 1GB 的离线软件包下载。大陆用户因为 在境内 没法从 GitHub 下载,因此需要有一个境内的下载地址,于是我就用了腾讯云的 COS(对象存储) 与 CDN(内容分发网络)服务。 用 CDN 的初衷不外 …
炮打 RDS,Pigsty v2.0 发布

大家好,Pigsty 的作者冯若航。 我相信在座的不少人都对我比较熟悉, 因此我就实打实给大家透个底。 这两天社区嘉宾聚在一起喝大酒, 所以很抱歉今天临时赶工 PPT, 给大家贡献一段数据库脱口秀的把戏。 所以如果出现嘴炮误伤, 请台下的各位 友商 不要着急, 因为有可能,我真的就是故意。 今天给大家带来的分享主题, 不出意料是告别 Pigsty V1。 我们将在此时隆重发布 2.0 版本! 为云数据库带来本地优先的开源平替! PGSQL 已经是足够完美的数据库内核引擎发动机, 业界需要的不是魔 …
大家好,Pigsty 的作者冯若航。 我相信在座的不少人都对我比较熟悉, 因此我就实打实给大家透个底。 这两天社区嘉宾聚在一起喝大酒, 所以很抱歉今天临时赶工 PPT, 给大家贡献一段数据库脱口秀的把戏。 所以如果出现嘴炮误伤, 请台下的各位 友商 不要着急, 因为有可能,我真的就是故意。 今天给大家带来的分享主题, 不出意料是告别 Pigsty V1。 我们将在此时隆重发布 2.0 版本! 为云数据库带来本地优先的开源平替! PGSQL 已经是足够完美的数据库内核引擎发动机, 业界需要的不是魔 …
驳《再论为什么你不应该招DBA》

郭德纲有一段相声:比如我和火箭专家说,你那火箭不行,燃料不好,我认为得烧柴,最好是烧煤,煤还得精选煤,水洗煤不行。如果那科学家拿正眼看我一眼,那他就输了。 但不管怎么说,马工也还是一位体面的瑞典研发工程师。没有做过DBA就敢大放厥词,开地图炮拉仇恨,实在勇气可嘉。之前在《你怎么还在招聘DBA》,以及回应文《云数据库是不是智商税》中,我们便已交锋过。 当别人把屎盆子扣在这个行业所有人头上时,还是需要人来站出来说几句的。因此今天特此撰文以驳斥马工的谬论:《再论为什么你不应该招DBA》。 马工的论点 …
郭德纲有一段相声:比如我和火箭专家说,你那火箭不行,燃料不好,我认为得烧柴,最好是烧煤,煤还得精选煤,水洗煤不行。如果那科学家拿正眼看我一眼,那他就输了。 但不管怎么说,马工也还是一位体面的瑞典研发工程师。没有做过DBA就敢大放厥词,开地图炮拉仇恨,实在勇气可嘉。之前在《你怎么还在招聘DBA》,以及回应文《云数据库是不是智商税》中,我们便已交锋过。 当别人把屎盆子扣在这个行业所有人头上时,还是需要人来站出来说几句的。因此今天特此撰文以驳斥马工的谬论:《再论为什么你不应该招DBA》。 马工的论点 …
Pigsty v2.0:开源RDS PG替代

GitHub Release | 发布注记 2023/02/28,Pigsty v2.0.0 正式发布,带来了一系列重大的功能更新。 现在 PIGSTY 是 “PostgreSQL In Great STYle"的首字母缩写,即”全盛状态的 PostgreSQL"。而 Pigsty 的定位也不再是 “开箱即用的 PostgreSQL 数据库发行版”,变成了 “Me Better 开源 RDS PG 替代”。 明人不说暗话,这是一个很有野心的目标:推翻云数据库垄断,砸烂 RDS 的饭碗!详见:《 …
GitHub Release | 发布注记 2023/02/28,Pigsty v2.0.0 正式发布,带来了一系列重大的功能更新。 现在 PIGSTY 是 “PostgreSQL In Great STYle"的首字母缩写,即”全盛状态的 PostgreSQL"。而 Pigsty 的定位也不再是 “开箱即用的 PostgreSQL 数据库发行版”,变成了 “Me Better 开源 RDS PG 替代”。 明人不说暗话,这是一个很有野心的目标:推翻云数据库垄断,砸烂 RDS 的饭碗!详见:《 …





