FutureX · Database
本期要点
· Snowflake 的 Postgres 数据镜像 GA:增删改秒级同步进 Snowflake,底层由 pg_lake 写 Iceberg
· Google borderless Lakehouse 一批功能 GA,BigQuery 支持 Iceberg V3;Gemini 跨云联邦查询进入预览
· Tiger Data 开源 Postgres 向量扩展 pg_vectorsearch(alpha),用分区索引 PRISM 替代 HNSW
· Neon Realtime 公测:任意 SQL 查询都可订阅成 live query
· TiDB Cloud Starter 公测 PostgreSQL 兼容,PingCAP 称年底前开源 TiDB X 核心代码
· Spark 原生向量化加速器 Apache Auron 毕业,成为 ASF 顶级项目
▎ 版本与产品发布
Snowflake Postgres 数据镜像(Data Mirroring)GA · htap
Snowflake 宣布 Postgres data mirroring 正式 GA。功能是把 Snowflake Postgres 里的表持续复制进 Snowflake,insert/update/delete 都同步,schema 变更和新加的表自动跟进,一条 SQL 就能建好镜像。机制上,它通过标准 logical replication 捕获变更,由开源扩展 pg_lake 写入 Apache Iceberg 变更日志表,Snowflake 侧再按 Postgres 事务边界整体推进,所以同一源事务里的改动会一起出现,外键与 join 不会错位。每张镜像表带一个 $live 视图,把已应用的数据和在途变更合并读出;文档给的延迟约 30 秒,另有 7 天的 $changes 变更流。目前只支持 Postgres→Snowflake 单向。这条是 Snowflake 去年收购 Crunchy Data、推出 Snowflake Postgres 之后,把 OLTP 和数仓之间的 CDC 管道收进平台内部;ClickHouse 走的是同一路线,即 PeerDB 并入 ClickPipes 后的 Postgres CDC。两家都想把"应用库到分析库"这一跳吃下来,区别在于 Snowflake 的中间层直接落在开放的 Iceberg 上。[1]
Neon Realtime 公测:live SQL 直接跑在 Postgres 里 · oltp
Neon(现为 Databricks 旗下 Lakebase Postgres)上线 Neon Realtime 公测,任意 SQL 查询都可以订阅,数据一变结果就随之更新,前端不用写轮询或重新拉取的逻辑。团队来自 Electric 同步引擎,这次把 live query 放进数据库内部,而不是挂一个单独的实时服务去镜像数据库,因此能和 Neon 的 scale-to-zero、branching 一起用。公测期免费、不用排队。官方把它定位成编码 agent 搭应用时"默认会用的原语":按他们的说法,agent 写 CRUD 一般能写对,写实时同步就容易出错。[2]
TiDB Cloud 扩容:Starter 公测 PostgreSQL 兼容,TiDB X 拟年底开源 · oltp ⚠️ 厂商口径
PingCAP 在 SCaiLE 2026 发布一组 TiDB Cloud 更新。TiDB Cloud Starter 开放 PostgreSQL 兼容公测,这让一向以 MySQL 兼容为卖点的 TiDB 也开始接 Postgres 生态;BYOC 进入公测;Premium 档计划 11 月 GA;新增面向 agent 的 TiDB Cloud Filesystem 预览,这是一个 serverless 分布式文件系统,agent 换新会话、新沙箱后,之前保存的工作仍然在(预览期内 checkpoint/rollback 命令不保证可用)。公司还表示将在 2026 年底前开源 TiDB X(即以对象存储为底座、计算与存储分离的新架构)的核心代码,这一项目前仍是计划。客户数字均为公司口径:半年内 agent 在 Starter 上建了近 300 万个实例;Atlassian 把 750 多个 PostgreSQL 集群合并成 16 个 TiDB 集群,承载 300 多万张表。[3]
其他版本动态:
· ClickHouse 维护版密集推送 v26.9.19.9-stable、v26.8.27.9 / v26.8.28.14-lts、v26.7.30.7 / v26.7.31.12-stable、v26.3.51.7 / v26.3.52.9-lts,另打出 v26.11.1.1-new 标签
· Trino 484
· Apache Doris 4.1.5
· Materialize v26.46.0
· Milvus 3.0.3
· LanceDB v0.41.0-beta.7 新增授权 API,带破坏性变更
· YugabyteDB 2.31 / 2026.1 分支修复带 ybhnsw 向量索引时 DROP DATABASE 失败的问题,并把带主键过滤的向量检索路由到匹配的 tablet
· CockroachDB v26.2.8、TiDB v8.5.x 补丁。
▎ 数据库 × AI
Tiger Data 开源 pg_vectorsearch:PRISM 分区索引挑战 HNSW · vector ⚠️ 厂商口径
Tiger Data(原 Timescale)发布开源 Postgres 扩展 pg_vectorsearch,目前是 alpha。新索引 PRISM 不像 HNSW 那样把向量连成图,而是把相近向量分到同一分区,再按压缩格式紧凑存成列表,思路接近新一代专用向量库的分区索引。官方在 1 亿向量规模下的自测结果:查询延迟 6 ms,所用机器内存只有 HNSW 的 1/4,建索引快 20 倍以上;对照组 HNSW 最小要 512 GB 内存的机器才建得完。公告没有给出召回率,也没有第三方复测,上述数字目前只是宣称。这件事的意义在于,pgvector 的 HNSW 吃内存,是团队从 Postgres 迁到专用向量库的主要原因之一,PRISM 针对的正是这个痛点。[4]
Databricks Predictive AI Functions 进入 Beta:预测与异常检测写成 SQL 函数 · ai-native
Databricks 推出 Predictive AI Functions Beta,新增 4 个 SQL 原生函数,覆盖异常检测、驱动因素分析、预测等,并升级 ai_forecast。新版 ai_forecast 底层换成基于 transformer 的时序基础模型,不用调参,可加节假日因子和外部协变量。这些函数能在 SQL 编辑器、notebook 里直接调用,也能在 Genie 里用自然语言触发、嵌进仪表盘,模型由平台统一维护。这类"把预测模型做成库内函数"的做法,绕开了数据科学团队这个排队环节。[5]
▎ 湖仓 · 开放表格式 · HTAP
Google borderless Lakehouse:BigQuery 支持 Iceberg V3,Gemini 跨云联邦进预览 · lakehouse
Google Cloud 宣布 borderless Lakehouse 今年早些时候发布的一批功能正式 GA。BigQuery 支持 Apache Iceberg V3 规范,包括 binary deletion vectors 与 sort orders,行级更新和删除不必再整文件重写;BigQuery 与 Managed Service for Apache Spark 可以读写同一批 Iceberg 表;通过 runtime federation,与 AWS Glue、Databricks Unity Catalog、Snowflake Horizon Catalog 做双向缓存;到 AWS/Azure 的 Cross-Cloud Interconnect 单连接 10 或 100 Gbps。执行引擎侧,Parquet reader 改为基于 FlatBuffers,I/O 改为并行处理,用来缩小开放格式与原生存储之间的性能差。同时上线预览的是 Gemini 集成:经 catalog federation 接入 Unity Catalog、Horizon 等外部目录后,业务用户可以用自然语言跨云查数据,数据不用先搬进 Google Cloud。在表格式之争里,Google 押的是"Iceberg 加多目录联邦",不另起一套标准。[6]
Rubrik 推出 Apache Iceberg 表级备份恢复 · lakehouse
Rubrik 发布 Apache Iceberg Protection,覆盖 AWS Glue Data Catalog 与 S3 Tables 中的 Iceberg 表,本月晚些时候 GA。它针对的缺口是:Iceberg 原生 snapshot 只是元数据指针,表一旦被删、被勒索软件破坏或被失控的 agent 覆盖,指针就跟着没了;原生工具能恢复底层文件,却不会把 catalog 接回去。Rubrik 同时备份数据和元数据,恢复时重建 catalog,表恢复后在 Athena、Spark、Trino 里直接能查,不可变备份存放在客户自己的 AWS 账号里。Iceberg 进入生产核心后,备份厂商开始把它当成需要单独保护的系统,这是一个信号。[7]
CedarDB:用一个 Postgres 兼容引擎同时跑事务和分析 · htap
TechCrunch 专访慕尼黑的 CedarDB。公司孵化自慕尼黑工业大学的研究型引擎 Umbra,5 位联合创始人都出自 Umbra 团队,主打在不加 CPU、内存的前提下压榨现代硬件,同时承载 OLTP 与 OLAP。CEO Moritz Sichert 的看法是,agent 会用自然语言直接对交易数据提分析问题,这让传统的"事务库加分析库"两套架构更难维持;选择兼容 PostgreSQL,既降低了迁移成本,也正好是 LLM 训练时最熟悉的方言。CedarDB 于 2025 年 5 月发布社区版和本地部署的企业版,同时宣布 530 万欧元种子轮。[8]
▎ 技术 · 架构 · 性能基准
Apache Auron 毕业为顶级项目:Spark/Flink 的原生向量化加速器 · lakehouse
Apache 软件基金会宣布 Auron 从孵化器毕业,成为顶级项目,同批的还有 Reqsign(从 OpenDAL 拆出的 Rust 云请求签名库,Lance、uv 等项目在用)和区块链框架 ResilientDB。Auron 的做法是读取 Spark 物理计划,把支持的算子转成原生执行计划,经 JNI 交给基于 DataFusion、Arrow 列式格式、用 Rust 实现的引擎执行,以 Spark client 扩展的形式安装,查询不用改写。它已接入 Spark、Flink,以及 Paimon、Iceberg、Hudi 三种表格式。ASF 公告称 Auron 通过全部 TPC-DS/TPC-H 用例,较 Spark 3.5 快 2 倍、平均省 50% 集群资源,这是项目方口径,未见第三方复测。给 JVM 系引擎换上原生向量化执行,已经有 Databricks Photon、Gluten+Velox 等方案,现在又多了一个 Rust/DataFusion 路线的 ASF 顶级项目。[9]
学界 · 研究前沿
· JetStream(arXiv 2610.20527):前人用 LLM 为固定负载合成专用数据库,需要迁移数据,数据一变加速效果就没了。JetStream 改为生成挂在现有 DBMS 上的查询专用加速器,直接读原生表、可维护辅助状态,存储、事务与恢复仍交给原数据库,写入时由一层引擎无关的底座保证辅助状态的事务一致性。[10]
· 在图数据库里训练和推理 GNN(arXiv 2610.19142):用 Cypher 在图库内完成采样、特征读取乃至整个前向计算,优化后训练快约 2.5 倍且精度不变;纯库内推理比把图冷加载进内存快 10 倍以上,不占额外内存。[11]
· RT-J(arXiv 2610.17867):8500 万参数的关系型基础模型,在 639 个网络爬取的数据库、6023 个由 LLM 生成的预测任务上预训练,上下文最长 8192 个单元格,只需几百个甚至更少的上下文示例就能在新库上做预测。[12]
▎ 融资 · 并购 · 商业化
Tamr|新一轮融资|2100 万美元 ⚠️ 单方口径
据 The Business Journals 报道,剑桥(麻省)的数据管理公司 Tamr 融资 2100 万美元,用于为企业 AI 整理和准备数据;轮次与投资方暂未见一手披露。Tamr 由 Michael Stonebraker 参与创立,主业是 data mastering,即用机器学习做实体解析、合并多源主数据。这类数据清洗、统一的环节,正被重新包装成 AI 就绪的前置工序。[13]
▎ 云厂商 · 生态 · 监管
Amazon S3 上架 Vercel Marketplace:对象、Iceberg 表、向量三种存储一键开通 · cloud
Vercel 开发者现在可以在控制台或 v0 对话里直接开通 S3 通用桶、S3 Tables(托管 Iceberg)和 S3 Vectors,鉴权走 OIDC 短期凭证,不用存静态密钥;在此之前,Aurora、DynamoDB、OpenSearch Serverless 已经上架。官方示例是在 Vercel Function 里用 DuckDB 按 ARN 挂载表桶后直接跑 SQL。AWS 称 S3 Vectors 的存储和查询成本较独立向量库最多低 90%,属厂商口径。[14]
Snowflake 拟与 Bleu 合作进入法国主权云 · cloud ⚠️ 计划口径
Snowflake 宣布有意与 Orange 系主权云 Bleu 合作,由欧洲本地伙伴运营,面向法国受监管行业提供 AI Data Cloud。Bleu 已有 ISO 27001 与 HDS 认证,正在申请 SecNumCloud 3.2 资质。数据可以放在客户自控的 S3 兼容存储里,并以 Iceberg 格式保存,供应商关系终止时不需要迁移。[15]
来源链接
[1] 〔2 方报道〕Snowflake;Traders Union | 10月16日 https://www.snowflake.com/en/blog/data-mirroring-ga-snowflake-postgres/ https://tradersunion.com/news/companies/show/3833200-snowflake-stock-falls-1-9percent-today/
[2] 〔来源〕Neon | 10月15日 https://neon.com/blog/neon-now-has-realtime
[3] 〔2 方报道〕Pluang;The Manila Times | 10月15日 https://pluang.com/en/news-feed/pidb-perluas-platform-cloud-dukung-aplikasi-enterprise-dan-ai https://www.manilatimes.net/2026/10/15/tmt-newswire/globenewswire/tidb-expands-cloud-platform-to-support-enterprise-and-ai-applications-on-one-data-foundation/2446845
[4] 〔来源〕TimescaleDB | 10月13日 https://www.tigerdata.com/blog/announcing-pg_vectorsearch-scalable-open-source-vector-search-postgresql
[5] 〔来源〕Databricks | 10月15日 https://www.databricks.com/blog/unlock-powerful-insights-and-forecasts-predictive-ai-functions
[6] 〔来源〕IT Brief UK | 约10月15日 https://itbrief.co.uk/story/google-adds-gemini-integration-to-borderless-lakehouse
[7] 〔来源〕TahawulTech.com | 约10月14日 https://www.tahawultech.com/industry/technology/rubrik-launches-lakehouse-protection-with-apache-iceberg-data-on-aws/
[8] 〔来源〕TechCrunch | 10月15日 https://techcrunch.com/2026/10/14/cedardb-wants-one-database-to-handle-both-transactions-and-analytics-as-ai-agents-raise-the-stakes/
[9] 〔来源〕The Manila Times | 10月14日 https://www.manilatimes.net/2026/10/14/tmt-newswire/globenewswire/the-apache-software-foundation-announces-new-top-level-projects/2445782/amp
[10] 〔来源〕arXiv https://arxiv.org/abs/2610.20527
[11] 〔来源〕arXiv https://arxiv.org/abs/2610.19142
[12] 〔来源〕arXiv https://arxiv.org/abs/2610.17867
[13] 〔来源〕The Business Journals | 10月15日 https://www.bizjournals.com/boston/news/2026/10/15/tamr-data-funding.html
[14] 〔来源〕news.lavx.hu | 约10月15日 https://news.lavx.hu/article/amazon-s3-lands-on-vercel-marketplace-and-v0-adding-object-table-and-vector-storage-to-the-frontend-cloud
[15] 〔来源〕Snowflake | 10月15日 https://www.snowflake.com/en/blog/snowflake-bleu-sovereign-cloud-france/
FutureX · 记录未来如何发生
素材来源多方媒体/网络新闻