跳转到主要内容

标签: OLAP

  • Catalog Bullshit:把数据库拆开,再租给你一张 PostgreSQL 表

    冯若航 发布于 数据库 5748 字 12 分钟

    冯若航PostgreSQLOLAP对象存储技术评论

    Catalog Bullshit:把数据库拆开,再租给你一张 PostgreSQL 表

    从 Snowflake 的治理清单说起 前几天,Snowflake 在一条官方推文里发了张黑底蓝字的海报,标题叫 THE ARCHITECT’S GOVERNANCE CHECKLIST,架构师治理清单。海报列了九个问题: 撤权缺口 策略漂移 静默损坏 分类盲区 “谁”的问题 端到端血缘 身份标准化 被遗忘权 逻辑一致性 配文只有三句话: 多引擎湖仓不只是在数据层失败。 它们在治理和安全无法跨所有引擎一致落地时失败。 数据互操作性 ≠ 治理互操作性。 第三句是真的,也是这篇文章的起点:数据格式开 …

    从 Snowflake 的治理清单说起 前几天,Snowflake 在一条官方推文里发了张黑底蓝字的海报,标题叫 THE ARCHITECT’S GOVERNANCE CHECKLIST,架构师治理清单。海报列了九个问题: 撤权缺口 策略漂移 静默损坏 分类盲区 “谁”的问题 端到端血缘 身份标准化 被遗忘权 逻辑一致性 配文只有三句话: 多引擎湖仓不只是在数据层失败。 它们在治理和安全无法跨所有引擎一致落地时失败。 数据互操作性 ≠ 治理互操作性。 第三句是真的,也是这篇文章的起点:数据格式开 …

  • 一场辩论之后,认真聊聊“本体论”

    发布于 数据库 7396 字 15 分钟

    OLAP数据主权哲学技术评论

    一场辩论之后,认真聊聊“本体论”

    上个月我写了一篇文章叫《Palantir 的“本体论”骗局》,用一张“罗塞塔石碑”对照表说了一件事:Palantir 的 Ontology 在技术上就是数据库建模。Object Type 是表,Property 是列,Link 是外键,Action 是存储过程。 文章引发了激烈争论,最终演变成一场公开直播辩论。辩论的结果没啥悬念,观众投票中老冯以 75% 的支持率获胜。但赢个辩论没什么意义。上一篇只做了“拆”的工作。这一篇,我想把更深层的东西说清楚:本体论到底是什么?Palantir 到底对它做 …

    上个月我写了一篇文章叫《Palantir 的“本体论”骗局》,用一张“罗塞塔石碑”对照表说了一件事:Palantir 的 Ontology 在技术上就是数据库建模。Object Type 是表,Property 是列,Link 是外键,Action 是存储过程。 文章引发了激烈争论,最终演变成一场公开直播辩论。辩论的结果没啥悬念,观众投票中老冯以 75% 的支持率获胜。但赢个辩论没什么意义。上一篇只做了“拆”的工作。这一篇,我想把更深层的东西说清楚:本体论到底是什么?Palantir 到底对它做 …

  • DuckDB 开发者大会四连击:扩展,加密,存储过程,边缘分析

    冯若航 发布于 数据库 15763 字 32 分钟

    冯若航OLAP扩展随笔

    DuckDB 开发者大会四连击:扩展,加密,存储过程,边缘分析

    DuckDB 最近举办了首届 DuckDB 开发者大会,里面有四个有趣的议题,老冯这里从视频中提取了文字稿,然后请 Claude / GPT 整理成完整的文章,在这里与大家分享,看看 DuckDB 生态的最新进展。以及最后附上老冯对 DuckDB 生态的点评 四篇演讲分别是: DuckDB 扩展:过去、现在、与未来 DuckDB 中的存储与加密 DuckPL:DuckDB 中的一种存储过程语音(PL/PGSQL) GizmoEdge:用于物联网的分布式 DuckDB 引擎 DuckDB 扩展:过 …

    DuckDB 最近举办了首届 DuckDB 开发者大会,里面有四个有趣的议题,老冯这里从视频中提取了文字稿,然后请 Claude / GPT 整理成完整的文章,在这里与大家分享,看看 DuckDB 生态的最新进展。以及最后附上老冯对 DuckDB 生态的点评 四篇演讲分别是: DuckDB 扩展:过去、现在、与未来 DuckDB 中的存储与加密 DuckPL:DuckDB 中的一种存储过程语音(PL/PGSQL) GizmoEdge:用于物联网的分布式 DuckDB 引擎 DuckDB 扩展:过 …

  • 开放数据标准:Postgres,OTel,与Iceberg

    Paul Copplestone 发布于 数据库 3528 字 8 分钟

    Paul CopplestonePostgreSQLOLAP数据库监控

    开放数据标准:Postgres,OTel,与Iceberg

    作者:Paul Copplestone,Supabase CEO 译者:Vonng,Pigsty Founder,数据库老司机 原文地址: https://supabase.com/blog/open-data-standards-postgres-otel-iceberg 数据世界正在浮出水面的三大新标准:Postgres、Open Telemetry,以及 Iceberg。 Postgres 基本已经是事实标准;OTel 和 Iceberg 尚在成长, 但它们具备当年让 Postgres …

    作者:Paul Copplestone,Supabase CEO 译者:Vonng,Pigsty Founder,数据库老司机 原文地址: https://supabase.com/blog/open-data-standards-postgres-otel-iceberg 数据世界正在浮出水面的三大新标准:Postgres、Open Telemetry,以及 Iceberg。 Postgres 基本已经是事实标准;OTel 和 Iceberg 尚在成长, 但它们具备当年让 Postgres …

  • 小数据的失落十年:分布式分析的错付

    发布于 数据库 3619 字 8 分钟

    OLAP数据库分布式系统

    小数据的失落十年:分布式分析的错付

    英文原文 | 微信原文 | 2025年05月23日 如果 2012 年 DuckDB 问世,也许那场数据分析向分布式架构的大迁移根本就不会发生。通过在2012年的Macbook笔记本上运行 TPC-H 评测,我们发现数据分析确实在分布式架构上走了十年弯路。 作者: Hannes Mühleisen,发布于 2025 年 5 月 19 日,英文 译评:冯若航,数据库老司机,云数据库泥石流 太长不看:我们在一台 2012 年款 MacBook Pro 上对 DuckDB 进行了基准测试,想要弄清楚 …

    英文原文 | 微信原文 | 2025年05月23日 如果 2012 年 DuckDB 问世,也许那场数据分析向分布式架构的大迁移根本就不会发生。通过在2012年的Macbook笔记本上运行 TPC-H 评测,我们发现数据分析确实在分布式架构上走了十年弯路。 作者: Hannes Mühleisen,发布于 2025 年 5 月 19 日,英文 译评:冯若航,数据库老司机,云数据库泥石流 太长不看:我们在一台 2012 年款 MacBook Pro 上对 DuckDB 进行了基准测试,想要弄清楚 …

  • 数据库火星撞地球:当PG爱上DuckDB

    冯若航 发布于 数据库 4114 字 9 分钟

    冯若航PostgreSQLOLAP数据库

    数据库火星撞地球:当PG爱上DuckDB

    蹭热点引出的好话题 昨晚在直播间,我与几位国内 DuckDB 先锋进行了一场对谈。话题跨度很大,从 DeepSeek 团队在开源周推出的分布式 DuckDB 分析框架 “Smallpond”,聊到 PostgreSQL 与 DuckDB 的深度融合,相当热闹。 DeepSeek 的开源的 “小池塘”用把 DuckDB 改为分布式的用法,从营销上给 DuckDB 打了很好的广告。但从实用角度和影响力来说,我个人对分布式 DuckDB 的价值保持保留态度(那个 3FS 实际上更有用)。因为这与 …

    蹭热点引出的好话题 昨晚在直播间,我与几位国内 DuckDB 先锋进行了一场对谈。话题跨度很大,从 DeepSeek 团队在开源周推出的分布式 DuckDB 分析框架 “Smallpond”,聊到 PostgreSQL 与 DuckDB 的深度融合,相当热闹。 DeepSeek 的开源的 “小池塘”用把 DuckDB 改为分布式的用法,从营销上给 DuckDB 打了很好的广告。但从实用角度和影响力来说,我个人对分布式 DuckDB 的价值保持保留态度(那个 3FS 实际上更有用)。因为这与 …

  • HTAP数据库,一场无人鼓掌的演出

    瑞典马工 发布于 数据库 3830 字 8 分钟

    瑞典马工OLAP国产数据库数据库

    HTAP数据库,一场无人鼓掌的演出

    原作者:瑞典马工 最近,有很多软件从业者转发阳振坤先生的演讲《起初,没有人愿意用我们的产品,直到十年前的那次“双十一”|阳振坤》。演讲本身很优秀,我推荐给身边的年轻人。但是作为一个工程师,我对阳振坤先生的一个观点有一些不同意见。 阳先生说: (HTAP)这个系统里面既把交易做了,又把分析做了;既降低用户的成本,又能让用户在使用上得到极大的简化。我觉得这个应该就是我们今后的机会。 阳先生又说 对使用者来说,这(HTAP)既大幅度地降低了成本,又大幅度地简化了使用方式。我想,这就是 …

    原作者:瑞典马工 最近,有很多软件从业者转发阳振坤先生的演讲《起初,没有人愿意用我们的产品,直到十年前的那次“双十一”|阳振坤》。演讲本身很优秀,我推荐给身边的年轻人。但是作为一个工程师,我对阳振坤先生的一个观点有一些不同意见。 阳先生说: (HTAP)这个系统里面既把交易做了,又把分析做了;既降低用户的成本,又能让用户在使用上得到极大的简化。我觉得这个应该就是我们今后的机会。 阳先生又说 对使用者来说,这(HTAP)既大幅度地降低了成本,又大幅度地简化了使用方式。我想,这就是 …

  • 七周七数据库(2025年)

    Matt Blewitt 发布于 数据库 4528 字 10 分钟

    Matt BlewittPostgreSQLOLAP数据库翻译

    七周七数据库(2025年)

    作者:Matt Blewitt,原文:七周七数据库(2025年) 译者:Vonng,数据库老司机,云计算泥石流 https://matt.blwt.io/post/7-databases-in-7-weeks-for-2025/ 长期以来,我一直在运营数据库即服务(Databases-as-a-Service),这个领域总有新鲜事物需要跟进 —— 新技术、解决问题的不同方法,更别提大学里不断涌现的研究成果了。展望2025年,考虑花一周时间深入了解以下每项数据库技术吧。 前言 这不是 “七大最佳 …

    作者:Matt Blewitt,原文:七周七数据库(2025年) 译者:Vonng,数据库老司机,云计算泥石流 https://matt.blwt.io/post/7-databases-in-7-weeks-for-2025/ 长期以来,我一直在运营数据库即服务(Databases-as-a-Service),这个领域总有新鲜事物需要跟进 —— 新技术、解决问题的不同方法,更别提大学里不断涌现的研究成果了。展望2025年,考虑花一周时间深入了解以下每项数据库技术吧。 前言 这不是 “七大最佳 …

  • ClickHouse收购PeerDB:这浓眉大眼的也要来搞 PG 了?

    冯若航 发布于 PGSQL 1141 字 3 分钟

    冯若航PostgreSQLOLAP商业

    ClickHouse收购PeerDB:这浓眉大眼的也要来搞 PG 了?

    ClickHouse[1] 是一家开源实时分析数据库初创公司,2021 年从 Yandex 分拆出来。周二,该公司宣布收购 PeerDB,这是一家专注于高性价比 Postgres 复制和变更数据捕获的公司。 自成立以来,甚至在作为 Yandex 支持的开源项目期间,ClickHouse 就已经凭借其大型企业实时数据仓库的优势建立了良好声誉。其客户包括德意志银行、eBay、Fastly、GitLab、HubSpot、微软、ServiceNow 和 Spotify。虽然 ClickHouse 早已提 …

    ClickHouse[1] 是一家开源实时分析数据库初创公司,2021 年从 Yandex 分拆出来。周二,该公司宣布收购 PeerDB,这是一家专注于高性价比 Postgres 复制和变更数据捕获的公司。 自成立以来,甚至在作为 Yandex 支持的开源项目期间,ClickHouse 就已经凭借其大型企业实时数据仓库的优势建立了良好声誉。其客户包括德意志银行、eBay、Fastly、GitLab、HubSpot、微软、ServiceNow 和 Spotify。虽然 ClickHouse 早已提 …

  • duckdb_fdw v1.0.0来了,第13届 PostgreSQL 中国技术大会见

    alitrack 发布于 PGSQL 1420 字 3 分钟

    alitrackOLAPPostgreSQLPG生态

    duckdb_fdw v1.0.0来了,第13届 PostgreSQL 中国技术大会见

    原作者:alitrack 也许是因为我一直在小公司工作,公司资源相对有限,我总是习惯寻找那些资源占用少但功能强大的项目。最早进入我视野的是 MonetDB[1],可惜后来停止开发了。2020 年,我发现了 DuckDB,感觉这正是我需要的。 在 2020 年,我同时在学习 PostgreSQL,了解到了它的强大之处,也发现了它的短板,尤其在 OLAP 方面。因此,我萌生了一个想法:如果能够借助 DuckDB 提升 PostgreSQL 的 OLAP 分析能力,那就太好了。虽然我是 FDW 开发 …

    原作者:alitrack 也许是因为我一直在小公司工作,公司资源相对有限,我总是习惯寻找那些资源占用少但功能强大的项目。最早进入我视野的是 MonetDB[1],可惜后来停止开发了。2020 年,我发现了 DuckDB,感觉这正是我需要的。 在 2020 年,我同时在学习 PostgreSQL,了解到了它的强大之处,也发现了它的短板,尤其在 OLAP 方面。因此,我萌生了一个想法:如果能够借助 DuckDB 提升 PostgreSQL 的 OLAP 分析能力,那就太好了。虽然我是 FDW 开发 …