FutureX

FutureX

Archives
Log in
Subscribe
November 6, 2026

FutureX·数据库行业 第57期 11/06

本期要点

· EDB 收购 ClickHouse 服务商 Altinity,金额未披露

· Spark 4.3 实时模式支持有状态算子,三项基准 P99 低于 150 ms

· SurrealDB 4.0 beta 重写查询核心,兼容 PG、MySQL 协议

· SAP Business Data Cloud 原生支持 Iceberg,catalog 用 Polaris

· Snowflake 的编码 agent CoCo 进入 Excel 与 Google Sheets

版本与产品发布

Apache Spark 4.3:Real-Time Mode 支持有状态处理,改为每季度发版 · streaming

Spark 4.3 把有状态处理带进了 Structured Streaming 的低延迟执行模式 Real-Time Mode。流式聚合、dropDuplicates 以及 Scala/Java 的 transformWithState(自定义有状态处理)都能在该模式下运行。按 SPARK-58884 中记录的基准,去重、窗口聚合和自定义有状态处理三类负载的端到端延迟都在 P99 150 ms 以内。Databricks 在官博里特意说明,这只是三项受测负载的结果,不是对所有管道的延迟承诺。这次升级沿用现有的 state store 和 checkpoint 机制,不另起一套编程模型。官博的说法是,对受支持的负载,“不再需要为毫秒级延迟另配一个流引擎”,矛头指向 Flink。上月 Databricks 已把实时模式接入声明式管道并转 GA,现在这项能力下沉到了开源引擎本身。另一个变化是 Spark 从每半年一个版本改为每季度一个功能版本。4.3 已上架 Databricks Runtime 19。[1]

SurrealDB 4.0(beta):新存储引擎、PG/MySQL 线协议兼容,另推 Earth 与 SurrealDS · oltp ⚠️ 厂商口径

多模型数据库 SurrealDB 推出 v4.0,官方文档目前仍标为 beta,首个 beta 版 4.0.0-beta.1 于 10 月 28 日发布。从 3.x 升级是单向的,升级后的数据目录无法再用 3.x 打开,厂商建议等 v4.1 再迁移。4.0 的引擎部分包括:查询核心重写,多套 planner 合并为统一执行器;经线协议兼容 PostgreSQL 与 MySQL;修复 240 余个问题。厂商用自家 crud-bench 测得的数字是:索引查询约快 22 倍,全表扫描约快 2.3 倍,CRUD 约快 42%;100 万条 768 维向量的 HNSW 建索引约快 7.4 倍,带过滤的向量检索从约 27 ms 降到约 1.1 ms。同时推出两种部署形态。SurrealDB Earth 跑在 Cloudflare 网络上,是 serverless 形态,每个数据库独立实例,空闲时缩到零,但暂不支持 DiskANN 向量索引等功能。SurrealDS 把持久页放在 S3/GCS/Azure Blob 上,存算分离、各自扩缩。产品口号是“每个 AI agent 的数据库与记忆”,与 Neon、Supabase 等面向 agent 的 Postgres 托管形态正面竞争。[2]

其他版本动态:Apache Doris 4.2.0-rc03 候选版 [3];Weaviate v1.40.4(运行时重建索引稳定性与 RBAC 修复)[4];LanceDB v0.42.0-beta.5 [5];RisingWave v3.1.1 补丁 [6];Materialize v26.49.1 [7];YugabyteDB 2026.1.4.0 / 2025.2.9.0 / 2024.2.12.0 回补构建及 2.31.0.0 开发构建 [8]

数据库 × AI

Snowflake CoCo 进入 Microsoft Excel 与 Google Sheets · ai-native

Snowflake 把面向数据团队的编码 agent CoCo 带进了 Excel 和 Google Sheets,官方博文没有写明这次处于预览还是 GA 阶段。用户用自然语言提需求,CoCo 会以当前 Snowflake 角色身份直接查询,再生成原生公式、图表和数据透视表,不需要传统连接器。Snowflake 的访问控制、脱敏和行访问策略对写回表格的结果同样生效。查询会利用 Semantic Views、Business Ontology 和 Cortex Sense 提供的语义上下文,数据也可以“智能刷新”。这一步的意义在于,治理边界从数仓延伸到了最分散、最难管的表格层。[9]

EDB 语义层参考方案:agent 能读什么由数据库权限决定 · agent ⚠️ 厂商口径

AWS 在 11 月 3 日发布了一份参考实现,把 EDB Postgres AI 的 AIDB 扩展接到 Amazon Bedrock AgentCore,agent 用 Strands Agents 框架搭建。业务语义直接取自数据库内已有的信息:表和列的注释提供业务描述,外键提供 join 关系,语义知识库只索引表、视图、列和注释的 embedding,不对客户记录做 embedding。示例中 prompt 和 agent 代码都不变,只更换数据库凭据,受限角色就取不到 SSN 列,访问在查询执行前就被拒绝。这是厂商自写的示例,只能说明这种设计可行,不能证明它在企业规模下可靠。[10]

研究:仅凭多向量文档索引,可还原近半数页面文字 · vector ⚠️ 单方口径

阿尔托大学的论文《Inverting Multi-Vector Visual Document Indices》攻击了在用的多向量检索模型 ColQwen3-8B(ColPali 一类的 late interaction 模型,即每页切成上千个图像块、各生成一个向量)。攻击者只拿到向量索引,用条件流匹配生成器把页面“画回来”。在 ViDoRe v3 的 19,252 页文档上,从未加保护的索引能还原 47.4% 的文字和 45% 的敏感信息(数字、专名、缩写),把还原页反查回原页的准确率达 98.4%。攻击还能只用公开数据推断出目标用的是哪个编码模型、页面版式,以及被打乱的向量顺序。对向量库运维来说,“向量看不懂,所以安全等级可以低于原文”这个假设不成立,向量索引应按原始文档同级做权限隔离。[11]

Rivet(YC W23):agent 编排只依赖一个对象存储桶,每个 Actor 自带 SQLite · agent

Rivet 在 HN 发帖亮相(73 分)。它是一个 agent 编排器,每个 agent、用户或会话对应一个长生命周期的 Actor,Actor 带内存状态、WebSocket、调度能力和持久化的 SQLite 库,用来存会话记录和产物,空闲时休眠。思路是把 agent 主循环放在沙箱之外,只在需要执行代码时才通过工具调用沙箱。整个系统唯一的依赖是一个 S3 兼容存储桶,没有独立数据库,也没有消息总线,控制面实例也经由存储桶互相发现。项目自报冷启动 p99 为 4.99 ms,每个 Actor 占 72 KB 内存。[12]

湖仓 · 开放表格式 · HTAP

SAP Business Data Cloud 原生支持 Iceberg,catalog 基于 Polaris · lakehouse

上周的技术大会上,SAP 宣布 Business Data Cloud(BDC)原生支持 Apache Iceberg,并推出基于 Apache Polaris 的统一 catalog,通过 BDC Connect 与 Databricks、Snowflake、Google、AWS、Microsoft 实现零拷贝共享,Delta Lake 也继续支持。SAP 今年 5 月收购了 Iceberg 系湖仓 Dremio,借助其 SQL 引擎,BDC 可以在不搬数据的情况下访问 SQL Server、MongoDB、Oracle、PostgreSQL。Databricks 同期扩大了 SAP Databricks 的合作范围,连本地部署的旧版 ECC 用户也能把历史订单数据导入 SAP Databricks。Gartner 分析师 Aaron Rosenbaum 的评价是,SAP 由此“从非常封闭的应用存储模型转向开放湖仓模型”。表格式之争里,又一家大型应用厂商在 Iceberg/Polaris 一侧表了态,同时保留 Delta 通道。[13]

技术 · 架构 · 性能基准

Neon:Lakebase Postgres 建在对象存储上,但 99.99999% 的页读取不经过它 · oltp ⚠️ 厂商口径

针对“对象存储上的 Postgres 必然慢”的常见质疑,Neon 公布了部分生产集群的页读取统计:99.99999% 的页读取不落到对象存储。读路径分三层,依次是 compute 节点本地缓存、pageserver(NVMe 上的 image/delta 层文件,按 GetPage@LSN 回放 WAL delta 后返回页面)和对象存储。每一层都缓存从下层取回的数据,深层读取的代价只付一次。对象存储“只做兜底、从不挡在查询前面”。Neon 说明,同一架构也用于 Databricks 的 Lakebase,文中结论对两者都适用。数据来自厂商自家集群的采样,没有第三方复核。[14]

学界 · 研究前沿

· When the Application Layer Is Disposable(arXiv 2610.36418):主张把完整性约束收回数据库。理由是 LLM agent 直接对库发查询和更新,代码用完即弃,会绕过写在应用层的不变量;SQL-92 就有的 ASSERTION 至今仍少有主流 RDBMS 支持。[15]

· AvalancheBench(arXiv 2605.24183):多模态企业分析基准,3 项任务共 58 个问题,覆盖文本、图像和文档,用来测试 data agent 能否判断何时调用语义算子,以及中间结果出错后如何沿依赖链“雪崩”。[16]

· ConStruM(arXiv 2601.20482):结构引导的 LLM 模式匹配框架,在 schema 列匹配中引入上下文结构,针对数据集成场景。[17]

· BobFlow(arXiv 2611.05761):以 dataflow 为载体做人与 agent 协作的数据科学。[18]

融资 · 并购 · 商业化

EDB|收购 Altinity|金额未披露 · olap

EnterpriseDB(EDB)宣布收购 Altinity,交易金额未披露,Altinity 工程团队已并入 EDB。Altinity 成立于 2017 年,是 ClickHouse 公司之外最主要的独立 ClickHouse 商业服务商,产品包括 Altinity Stable Builds、Kubernetes Operator 和托管服务 Altinity.Cloud,客户有 The Trade Desk、Tubi、Kong、AppsFlyer、ZoomInfo、PostHog 等。EDB 自称是 Postgres 最大的商业贡献者,并称 Altinity 是 ClickHouse 的第二大独立贡献方。收购后,两种引擎会在 EDB Postgres AI 平台下统一,主打可本地、多云部署的“主权 AI”。近期产品计划包括 Postgres 与 ClickHouse 环境之间共享的 Iceberg catalog,以及统一的访问控制,目前仍是路线图。The New Stack 的分析指出了实际痛点:从 Postgres 事务提交到 ClickHouse 可查,中间隔着复制槽、连接器、消息队列、sink 和去重,权限规则还要在两边各写一遍。IDC 研究总监 Devin Pratt 认为,此前 EDB 客户要做分析负载只能另找厂商,这次收购补上了分析这一侧。对 ClickHouse 生态而言,最大的独立服务商被一家 Postgres 厂商收入囊中。ClickHouse 公司此前也以收购 PeerDB 打通 Postgres CDC,“Postgres + ClickHouse”组合正在成为几方都在争夺的标准栈。[19]

Ocient|C 轮|1 亿美元 · olap ⚠️ 单方口径

主打万亿行级分析的芝加哥数据库公司 Ocient 据报完成 1 亿美元 C 轮,距此前约 1.32 亿美元的 B 轮系列融资约 18 个月,报道未披露领投方。Ocient 走 MPP 路线,计算紧贴 NVMe SSD,长期扎根广告技术领域,现在以 OcientAIQ 统一数据平台为名,补上了向量等 AI 数据类型。公司称今年营收预计增至约 3 倍,目标客户是超大型企业和国家级机构。融资信息目前仅见单一媒体报道,营收预期为公司自述。[20]

云厂商 · 生态 · 监管

JetBrains DataGrip 内嵌 DuckDB,实现跨库 join · olap

DataGrip 用户呼声最高的需求之一,是在一条查询里 join 不同连接上的数据。JetBrains 没有自研跨库查询引擎,而是内嵌了 DuckDB。团队评估过 Apache Calcite、基于 PSI 自行处理和 H2 等方案,最后选中 DuckDB,决定性因素是 DuckDB 支持自定义表函数,可以直接接上 IDE 已有的查询执行链路,同时还有投影下推等优化。用户可以在一条 DuckDB 方言 SQL 里 join PostgreSQL、MySQL、MongoDB 等数据源,不需要额外基础设施。这项能力也随数据库插件进入其他 JetBrains IDE。DuckDB 又多了一个作为“嵌入式查询内核”的落地案例。[21]

OceanBase 获世界互联网大会杰出贡献奖,CEO 杨冰称开源是出海“必选项” · oltp

11 月 4 日,OceanBase 在 2026 世界互联网大会上获得“杰出贡献奖”成长潜力类奖项,今年 230 余家企业申报、15 家获奖。CEO 杨冰表示,海外金融机构评估核心账务数据库,首先要看源码和架构。公司此前公布,在新兴金融科技领域服务全球 100 多家企业,其中电子钱包 20 多个、支付平台 50 多个。[22]

Railway 托管 Postgres 年度能力汇总 · cloud

PaaS 平台 Railway 汇总了今年托管 Postgres 的更新:新建实例默认只能经私有网络访问,凭据可一键轮换,CPU 和内存按用量计费并可纵向自动扩缩,磁盘可在线扩容,还提供高可用和迁移回滚等能力,并支持交给 agent 操作。[23]

来源链接

[1] 〔来源〕Databricks | 11月5日 https://www.databricks.com/blog/introducing-apache-spark-43-now-available-databricks-runtime-19

[2] 〔2 方报道〕The Register;Blocks & Files | 11月5日 https://www.theregister.com/architecture/2026/11/05/surrealdb-supplies-faster-performance-and-more-scalbility-with-major-v40-update/5307871

[3] 〔来源〕Apache Doris https://github.com/apache/doris/releases/tag/4.2.0-rc03

[4] 〔来源〕Weaviate https://github.com/weaviate/weaviate/releases/tag/v1.40.4

[5] 〔来源〕LanceDB https://github.com/lancedb/lancedb/releases/tag/v0.42.0-beta.5

[6] 〔来源〕RisingWave https://github.com/risingwavelabs/risingwave/releases/tag/v3.1.1

[7] 〔来源〕Materialize https://github.com/MaterializeInc/materialize/releases/tag/v26.49.1

[8] 〔来源〕YugabyteDB https://github.com/yugabyte/yugabyte-db/releases/tag/2026.1.4.0-b29 https://github.com/yugabyte/yugabyte-db/releases/tag/2026.1.4.0-b28

[9] 〔来源〕Snowflake | 11月6日 https://www.snowflake.com/en/blog/snowflake-coco-microsoft-excel-google-sheets/

[10] 〔来源〕remio | 11月3日 https://www.remio.ai/post/edb-semantic-layer-puts-agent-access-rules-inside-postgres

[11] 〔来源〕科技行者 | 11月5日 http://www.techwalker.com/2026/1105/3204820.shtml

[12] 〔来源〕github.com | 11月6日 https://github.com/rivet-dev/rivet

[13] 〔2 方报道〕The Register;news.lavx.hu | 11月5日 https://www.theregister.com/software/2026/11/05/sap-promises-to-open-out-data-flows-in-both-directions/5307495

[14] 〔来源〕Neon | 11月5日 https://neon.com/blog/lakebase-postgres-reads-never-touch-object-storage

[15] 〔来源〕arXiv https://arxiv.org/abs/2610.36418

[16] 〔来源〕arXiv https://arxiv.org/abs/2605.24183

[17] 〔来源〕arXiv https://arxiv.org/abs/2601.20482

[18] 〔来源〕arXiv https://arxiv.org/abs/2611.05761

[19] 〔7 方报道〕PR Newswire;TechTarget;The New Stack;Unite.AI;citybiz;等 7 家 | 11月5日 https://www.prnewswire.com/news-releases/edb-acquires-altinity-to-bring-together-the-two-leading-open-source-databases-advancing-its-sovereign-ai-data-system-and-reducing-overall-costs-for-customers-302930209.html https://www.techtarget.com/news/enterprisedb-acquires-altinity-to-unify-open-source-database-engines/873835/

[20] 〔来源〕Blocks & Files | 11月5日 https://www.blocksandfiles.com/ai-ml/2026/11/05/ai-energized-trillion-row-database-startup-ocient-raises-100-million/5307819

[21] 〔来源〕DuckDB | 11月5日 https://duckdb.org/2026/11/05/jetbrains-datagrip.html

[22] 〔来源〕中国日报网 | 11月4日 https://cn.chinadaily.com.cn/a/202611/05/WS6aec1a7fe4b0e14252fc9538.html

[23] 〔来源〕Railway Blog | 11月6日 https://blog.railway.com/p/managed-postgres

Don't miss what's next. Subscribe to FutureX:
← Newer FutureX·数据库行业 第58期 11/08 Older → FutureX·数据库行业 第56期 11/05
Powered by Buttondown, the easiest way to start and grow your newsletter.