Newshot

Postgres 19 发布,现已登陆 Neon 和 Databricks Lakebase

Translation(model translation, not the source's own text)

文章标题:Postgres 19 已发布,现已在 Neon 和 Databricks Lakebase 上可用

正文:

  • PostgreSQL 19 在社区发布当天就已在 Lakebase 上可用。要试用它,请创建一个新的 Lakebase 项目并选择 PostgreSQL 19。
  • 本次 PostgreSQL 发布聚焦于运维控制。REPACK 在读写持续进行的同时回收空间,查询计划建议让你能够稳定出错计划,WAIT FOR LSN 让你在副本上实现读己之写。逻辑复制也获得了多项升级。
  • 多位 Lakebase 工程师是 PostgreSQL committer 和贡献者,他们参与了本次发布的开发工作,从查询计划建议到共享内存和发布管理。

PostgreSQL 19 今日正式 GA,并且已在 Lakebase 上可用。新的主版本通常需要数周时间才能登陆其他托管 PostgreSQL 服务。而我们希望当天就让客户用上它。

Lakebase 团队的多位工程师是 PostgreSQL committer 和贡献者,他们直接参与了本次发布的开发,从查询计划建议到共享内存、locale 处理和发布管理。要试用它,请创建一个新的 Lakebase 项目并选择 PostgreSQL 19 作为版本。

PostgreSQL 19 的新特性

PostgreSQL 19 是一个务实的版本。没有一个能改变 PostgreSQL 定位的重磅特性。相反,版本 19 针对的是数据库团队熟知的各种运维问题:表膨胀、查询计划不稳定、副本延迟、统计信息不完整,以及在生产环境中难以安全执行的维护工作。

贯穿其中的主线是控制力。PostgreSQL 19 提供了更多方式,让你在默认设置不够用时介入,同时不放弃该项目对可靠性和可预测行为的偏好。

完整变更列表见 PostgreSQL 19 发布说明。

REPACK

PostgreSQL 使用多版本并发控制,因此 UPDATE 会创建新的行版本,DELETE 会留下死元组。常规的 vacuum 使这些空间可被复用,但它不一定将空间归还给操作系统,也不一定能恢复有用的物理行顺序。随着时间推移,频繁更新的表可能变得膨胀且聚簇效果差。

通常的修复手段是 VACUUM FULL、CLUSTER 或 pg_repack 等外部工具。内置命令可以工作,但它们在整个操作期间持有 ACCESS EXCLUSIVE 锁,阻塞对表的正常访问。

PostgreSQL 19 新增了 REPACK,在操作的大部分时间内正常读写可以继续进行的同时回收空间。例如,一个聊天应用可以在按会话和发送时间聚簇行的同时,使用现有索引重建其 messages 表:

REPACK 像 VACUUM FULL 一样回收空间;配合 USING INDEX,它还会像 CLUSTER 一样物理排序行。配合 CONCURRENTLY,PostgreSQL 在正常读写持续进行的同时重建表,通过逻辑解码捕获持续发生的变更。然后它获取 ACCESS EXCLUSIVE 锁,应用所有剩余的已捕获变更,并将新表和索引文件替换到位。该阶段通常很短暂,但在繁忙的表上可能耗时更长。

存在运维约束。并发 repack 在操作期间会创建一个额外的复制槽,因此需要在 max_repack_replication_slots 下有可用容量,并且表需要具有非延迟主键或合适的基于索引的副本标识。它还需要临时磁盘空间来存放表和所有索引的副本,可能还需要一个最大可达表大小的排序文件。更新和删除流量大的表还面临一个额外限制:当前上游 PostgreSQL 19 实现中,如果在 REPACK (CONCURRENTLY) 运行期间目标表中有超过约 1.04 亿个元组被更新或删除,操作就会失败。这里统计的是 repack 期间发生的变更,而非表中已有的行。

文章标题:Postgres 19 已发布,并已在 Neon 和 Databricks Lakebase 上可用

正文: 并非所有关系类型都符合条件。长时间运行的事务可能会延迟最终的锁获取。并发重新打包也不是 MVCC 安全的:在它提交之后,使用重新打包开始之前所拍摄快照的事务可能会看到该表为空。此外,物理聚簇会随着后续写入的到来而逐渐退化。

REPACK CONCURRENTLY 仍然需要规划,但它将一个此前需要更多停机时间或依赖扩展才能完成的任务带入了核心。

查询计划建议

PostgreSQL 基于代价的优化器使用表统计信息和代价估算来选择执行计划。大多数情况下,这运作良好。

统计信息能很好地描述单个表,但真实数据集往往包含难以捕捉的关联关系。设想企业客户占客户的 0.1%,却产生了 30% 的订单。按表统计的信息无法捕捉这种跨表关联。

有了 orders.customer_id 上的索引,规划器可能会估计每个企业客户只有少量订单,并选择反复探测该索引的嵌套循环。如果这些客户实际上贡献了 30% 的订单,那么每次查找返回的行数将远超预期,此时哈希连接可能更为合适。

PostgreSQL 19 针对这些情况新增了 pg_plan_advice 和 pg_stash_advice:

  • pg_plan_advice 将规划器决策描述为建议,应用所提供的建议,并报告建议是否被遵循。
  • pg_stash_advice 按查询 ID 存储建议,并在规划匹配的查询时自动应用。

这些组件并不添加跨表统计信息,也不替换规划器。相反,它们让你在估算不准确导致糟糕计划时进行干预。

考虑一个统计企业客户订单数量的查询:

这里,c 是过滤后的 customers 表的别名。以下建议要求 PostgreSQL 将这些客户放在哈希连接的内侧:

当 PostgreSQL 能够应用该建议时,EXPLAIN 会报告类似如下的反馈:

matched 表示生成的计划符合该建议。它并不意味着新计划一定更好;你仍需根据实际工作负载对其进行评估。

与内联优化器提示不同,计划建议存在于应用程序查询文本之外。你可以检查当前计划、测试有针对性的建议,然后按查询 ID 将其存储起来。

pg_stash_advice 是自动应用已存储建议的组件。在任一数据库中使用其存储管理函数之前,需要先在该数据库中创建该扩展:

创建一个存储库,并将测试过的建议与 EXPLAIN (VERBOSE) 报告的查询 ID 关联起来。将 <query_id> 替换为你计划中的标识符:

将数据库配置为对新连接使用该存储库:

将 appdb 替换为你的数据库名称。

在你诊断出问题之后,应将计划建议视为一种稳定手段。数据分布会变化,缓存的预备语句可能会在一段时间内继续使用较旧的计划,而优化器正确的次数仍然多于错误的次数。

当规划器意外地将某个关键查询切换到更差的计划时,PostgreSQL 19 为你提供了一种受支持的方式来将其稳定下来。

并行 autovacuum 与新的统计视图

Autovacuum 现在在清理索引时可以使用并行工作进程,由 autovacuum_max_parallel_workers 控制。新的评分系统会根据表对清理或分析的紧迫程度对符合条件的表进行优先级排序。

新的统计视图暴露了服务器的更多运行情况:

  • pg_stat_lock 按锁类型报告统计信息。
  • pg_stat_recovery 显示恢复状态。
  • pg_stat_autovacuum_scores 显示 autovacuum 如何对表进行优先级排序。

查询级诊断也有所改进。EXPLAIN (ANALYZE, IO) 报告异步 I/O 活动,auto_explain.log_io 可以在记录的查询计划中包含相同的信息。

PostgreSQL 19 还在 pg_stat_wal、EXPLAIN (ANALYZE, WAL) 以及 vacuum 和 analyze 日志中报告全页镜像写入的字节数。

文章标题:Postgres 19 已发布,现已在 Neon 和 Databricks Lakebase 上可用

正文: 这些结合起来,使得性能调查不再那么依赖推断。你可以看到为什么维护工作被优先处理、异步 I/O 发生在哪里,以及有多少 WAL 字节来自 full-page images。

逻辑复制

逻辑复制已成为变更数据捕获、迁移、实时服务和 ETL 管道的核心基础设施。PostgreSQL 19 填补了几个长期存在的空白:

  • 当 wal_level 为 replica 时,无需重启即可激活逻辑解码。创建第一个有效的逻辑复制槽会将 effective_wal_level 提升为 logical,显示当前生效的 WAL 级别。
  • 序列值可以从发布端同步到订阅端。
  • 发布可以使用 FOR ALL SEQUENCES 包含所有序列。
  • CREATE PUBLICATION ... FOR ALL TABLES EXCEPT (...) 发布除指定集合之外的所有表。
  • 订阅可以使用 CREATE SUBSCRIPTION ... SERVER 复用 postgres_fdw 服务器的连接详细信息。
  • retain_dead_tuples 订阅选项保留足够的信息以检测 update_deleted 冲突,即复制更新针对的是被另一个源删除的行。检测还要求订阅端启用 track_commit_timestamp,并且 pg_stat_subscription_stats 会统计这些冲突。

序列同步消除了一个棘手的迁移边缘情况,尤其是在使用逻辑复制进行大版本升级时。复制表行而不推进其序列,可能导致提升后的订阅端生成已存在的值,从而引发重复键错误。

当订阅以 copy_data = true(默认值)创建时,PostgreSQL 会复制初始序列值。后续的序列更改不会持续流式传输,因此在切换前立即刷新它们:

这会将订阅已知的序列更新为发布端的当前值。如果发布新增了序列,请使用 ALTER SUBSCRIPTION ... REFRESH PUBLICATION 添加它们并在切换前同步其值。

WAIT FOR LSN

异步只读副本增加了读取容量,而不会让主库提交等待它们。代价是复制延迟。应用程序可以在主库上提交写入,立即从副本读取,却找不到该行,因为副本尚未重放相关的 WAL。

PostgreSQL 19 增加了一种直接的方式来协调这种交接。LSN 标识 PostgreSQL WAL 中的一个位置,WAIT FOR LSN 会阻塞备库,直到重放至少到达请求的位置:

默认情况下,WAIT FOR LSN 会无限期等待备库重放请求的 LSN。其他模式可以等待 WAL 被写入或刷盘,并且你可以设置超时。

客户端或连接池仍然必须将 LSN 从主库传递到副本。数据库现在提供了缺失的同步步骤,因此读己之写行为不再需要轮询或任意休眠。

postgres_fdw 的统计信息导入

外部数据包装器让 PostgreSQL 可以像查询本地数据一样查询远程系统。当本地优化器不知道远程表的大小或数据分布时,规划这些查询一直很困难。

PostgreSQL 19 允许 postgres_fdw 从远程服务器导入统计信息:

ANALYZE 将现有的远程统计信息导入本地服务器。如果导入失败,postgres_fdw 会回退到行采样。因此远程统计信息需要是最新的。

没有远程统计信息时,PostgreSQL 可能依赖回退的大小估计并选择嵌套循环。导入后,规划器可以更准确地估计行数,并可能选择哈希连接。

联邦查询仍然需要支付网络和远程系统的成本,但准确的行估计消除了可避免的坏计划的一个主要来源。

ON CONFLICT DO SELECT

INSERT ... ON CONFLICT DO SELECT 为你提供了一种干净的 get-or-create 模式,返回现有行和新插入的行:

它取代了 DO UPDATE SET col = EXCLUDED.col 这一变通做法,后者即使没有任何值发生变化也会执行一次更新。这会创建一个新的行版本,并在每次冲突时留下一个死元组。

COPY TO 的 JSON 输出

COPY TO 现在可以直接输出 JSON。默认情况下,它每行写入一个对象,而 FORCE_ARRAY 会将输出包裹在单个 JSON 数组中:

新的 JSON 格式仅用于导出,因此 COPY FROM 不接受该格式。

更小的 SQL 与性能改动

最后,还有几项带来体验提升的小改动:

  • JSON 路径表达式获得了熟悉的字符串方法,例如 btrim()、lower()、replace() 和 split_part()。
  • random(min, max) 系列函数现在支持 date、timestamp 和 timestamptz,这对测试和合成数据集很有帮助。
  • 五个窗口函数接受 IGNORE NULLS 和 RESPECT NULLS。
  • 当 io_method = worker 时,I/O worker 会在 io_min_workers 和 io_max_workers 之间自动伸缩。外键检查更快了,查询规划器和执行器也获得了又一轮针对性优化。

我们也失去了一些特性

若干重要特性在 PostgreSQL 19 开发期间合入,但在发布前被移除。审查者发现了正确性或设计方面的问题,在开发周期后期解决这些问题的风险过高,因此社区决定将这些特性留待后续版本。

最终不会随 19 发布的特性包括:

  • SQL/PGQ 属性图查询。CREATE PROPERTY GRAPH 和 GRAPH_TABLE 将针对常规表的图模式匹配引入 SQL。已于 2026 年 9 月 7 日回退。
  • UPDATE 和 DELETE ... FOR PORTION OF。用于按时间范围更新和删除,会拆分行以保留目标时间范围之外的历史记录。已于 2026 年 9 月 15 日回退。
  • ALTER TABLE ... MERGE PARTITIONS 和 SPLIT PARTITION。用于合并或拆分分区的内置命令。已于 2026 年 8 月 27 日回退。
  • GROUP BY ALL。按选择列表中每个非聚合表达式分组的简写形式。已于 2026 年 7 月 17 日回退。
  • pg_dumpall 的非文本输出格式。已于 2026 年 6 月 18 日回退。
  • DDL 提取函数。pg_get_role_ddl()、pg_get_tablespace_ddl() 和 pg_get_database_ddl() 已于 2026 年 9 月 13 日回退。

感谢 PostgreSQL 贡献者

PostgreSQL 由其贡献者打造:感谢发布说明中列出的数百位社区贡献者。特别感谢 Lakebase 团队中参与此版本 PostgreSQL 工作的工程师:

  • Robert Haas 编写了 pg_plan_advice 和 pg_stash_advice(后者与 Lukas Fittl 合作)
  • Heikki Linnakangas 参与了注册共享内存的新机制、子系统分配共享内存方式的重构、multixact 修复,以及将 max_locks_per_transaction 的新默认值设为 128
  • Jeff Davis 编写了让 CREATE SUBSCRIPTION 复用 postgres_fdw 服务器连接信息的改动,并做了大量 locale 和字符处理方面的工作
  • Jonathan Katz 参与了 PostgreSQL 19 新闻稿的撰写,并负责发布协调
  • Matthias van de Meent 参与了多个提交,包括静态索引访问方法例程的改动
  • Alexander Lakhin 发现并报告了多个 bug

升级到 PostgreSQL 19

与任何新的 PostgreSQL 主版本一样,我们建议采取审慎的方式采用它。在将生产工作负载迁移到 19.0 之前,我们建议你:

  • 先在开发或预发布环境中,在 PostgreSQL 19 上测试你自己的负载、查询和扩展
  • 与当前版本对比性能和行为的差异,因为主版本可能改变查询计划和默认值
  • 检查你依赖的扩展在 PostgreSQL 19 上是否可用(见下文)。
  • 在对结果满意之前,让生产环境继续运行当前版本

PostgreSQL 19 还更改了若干默认值和兼容性行为。升级前请检查以下内容:

  • JIT 编译默认关闭
  • TOAST 压缩默认使用 LZ4 而非 pglz
  • MD5 密码认证会发出更强烈的弃用警告

文章标题:Postgres 19 正式发布,现已登陆 Neon 和 Databricks Lakebase

正文:

  • 移除了 RADIUS 身份验证支持
  • standard_conforming_strings 始终开启
  • pg_upgrade 会拒绝在 inet 或 cidr 上存在受影响的 btree_gist 索引的集群
  • 数据库、角色和表空间名称不再允许包含回车符或换行符

关于扩展的说明

我们已在 PostgreSQL 18 版本发布中介绍了所支持的大部分扩展,但并非所有扩展都已在 PostgreSQL 19 上可用。随着扩展提供方陆续提供,我们正在添加更多扩展。如果你的工作负载依赖某个特定扩展,请在规划迁移之前确认它已在 PostgreSQL 19 上可用。

社区通常会在主版本发布几个月后推出第一个小版本,因为实际使用会暴露需要修复和改进的问题。PostgreSQL 19.1 预计于 2 月发布,许多团队围绕该版本规划生产环境升级。对于任何 .0 版本来说,这都是常见且合理的做法,这里同样如此。

无论你的时间安排如何,我们都会提供帮助。如果你想讨论升级规划或测试,请联系你的客户团队或 Databricks 支持。

立即试用

PostgreSQL 19 现已在 Lakebase 上可用。在你的工作区中创建一个 PostgreSQL 19 项目即可试用,如果你还不熟悉 Lakebase,也可以从 Lakebase 入门开始。

在收件箱中获取最新文章

订阅我们的博客,即可将最新文章直接发送到你的收件箱。

注册

The translation is machine-generated and individual terms may be off. Nothing is rewritten or cut; the original is authoritative.

Published by Hacker News
This site only summarises and aggregates; copyright stays with the original author. Headlines and summaries follow the source — where they differ, the original wins.
Read the original ↗