postgresql分区实现
社区干货
PostgreSQL 开发运维最佳实践
# 前言这篇文章旨在提供 RDS for PostgreSQL 的一些开发和运维建议,以助您提升数据库使用的标准化和稳定性。# 性能与稳定性* 慎用子事务,避免事务中使用过多的子事务。* 游标使用后及时关闭。* 对于在线业务... 建议按照表中时间字段进行分区,使用 DROP / TRUNCATE 直接清理对应的子表。* 对于频繁更新的表且预留了较多的存储空间,可以配置较低的 FILLFACTOR 用于 HOT UPDATE 来提高数据更新性能,减少索引 I/O。* DDL 操作...
排查由于aggresive vacuum引起WAL日志增长的问题
# 问题背景线上 RDS for PostgreSQL 实例发现短时间内,从指标中查看到有如下信息:* 可用存储空间迅速降低* 此时实例并没有大量的 DML,而 WAL 日志却增长异常* CPU,内存,磁盘 IO / 带宽等指标均有突增# 问题... 对于大表应使用分区表,并对大表设置不同的 vacuum 年龄3. 避免大事务,长事务,Long 2PC如果您有其他的优化建议,欢迎留言,分享。# 参考文档* https://www.postgresql.org/docs/12/routine-vacuuming.html
PostgreSQL 迁移前的环境检查
# 前言在云计算的时代,数据是公司最宝贵的资产,而数据库在数据的产生,存储,消费的各个阶段都扮演着不可或缺的角色。数据库迁移是实现业务上云最重要的环节。本章节主要关注在数据库迁移前的环境摸排,对现有环境做到心里有数。也方便在后期进行数据校验。# 预检查项## 1. 时区在进行数据库迁移之前,需要提前关注数据库时区,将目标数据库的时区和主库保持一致。````undefined# 查看全局配置postgres=# show timezone; #...
PostgreSQL 中逻辑复制的使用场景
PostgreSQL 提供了原生的迁移工具 pg_dump,适用于数据量小的一次性迁移,最大的缺点就是业务停机时间长,性能较差。反观逻辑复制,可以实现实时的增量迁移,业务上停机时间更短。## 场景三:数据库升级在数据库版本升级升级过程中,除了就地升级和逻辑的导入导出,由于逻辑复制可以跨大版本的特性,也可以作为数据库版本升级的方案。## 场景四:多云场景在多云场景中,物理复制是很难实现的,有如下几点原因:1. 不同云厂商提供的 Post...
特惠活动
postgresql分区实现-优选内容
postgresql分区实现-相关内容
同步至火山引擎版 PostgreSQL
本文介绍如何在数据库传输服务 DTS 控制台创建火山引擎专有网络 PostgreSQL 同步至火山引擎版 PostgreSQL 任务。 前提条件按需设置源端信息,具体如下所示: 在使用 VPN 实现数据同步时,自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上VPC与云下多数据中心网络互通。 在需要使用专线实现数据同步时,您需要搭建云上单私有网络和云下单数据中心网络连通的专线连接。详细操作,请参见配置专线连接。 ...
同步至火山引擎版 PostgreSQL
本场景介绍如何在数据库传输服务 DTS 控制台创建火山引擎版 PostgreSQL 同步至火山引擎版 PostgreSQL 任务。 前提条件已创建云数据库 PostgreSQL 版实例、数据库和账号。详细操作,请参见创建实例、创建数据库和账号... 当您想通过专线实现数据同步时,您可以提交工单联系技术人员。 使用限制应用限制类型 说明 源库 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据同步的速率。 待同步的表需具备主键或唯一非空约...
迁移至火山引擎专有网络 PostgreSQL
本场景介绍如何在数据库传输服务 DTS 控制台创建公网自建 PostgreSQL 迁移至火山引擎专有网络 PostgreSQL 任务。 前提条件已在公网环境中自行搭建 PostgreSQL 实例和数据库。 按需设置目标端信息,具体如下所示: 在使用 VPN 实现数据迁移时,自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上VPC与云下多数据中心网络互通。 在需要使用专线实现数据迁移时,您需要搭建云上单私有网络和云下单数据中心...
同步至火山引擎专有网络 PostgreSQL
本文介绍如何在数据库传输服务 DTS 控制台创建公网自建 PostgreSQL 同步至火山引擎专有网络 PostgreSQL 任务。 前提条件按需设置目标端信息,具体如下所示: 在使用 VPN 实现数据同步时,自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上VPC与云下多数据中心网络互通。 在需要使用专线实现数据同步时,您需要搭建云上单私有网络和云下单数据中心网络连通的专线连接。详细操作,请参见配置专线连接。 ...
什么是云数据库 PostgreSQL 版
云数据库 PostgreSQL 版是火山引擎基于开源数据库 PostgreSQL 打造的弹性、可靠的在线关系型数据库服务。PostgreSQL 实例使用云原生方式部署,结合本地 SSD 存储类型,提供高性能读写能力;完全兼容 PostgreSQL 引擎,... PostgreSQL 提供备份能力,支持数据备份及日志备份,支持按备份集恢复及按时间点恢复,保障数据可靠性。 一主多读架构PostgreSQL 支持一主多读架构,支持挂载只读节点。开启读写分离功能后,可实现自动读写分离,轻松应对...
创建火山引擎版 PostgreSQL数据订阅任务
请参见预检查项(PostgreSQL)。 限制说明限制类 说明 源数据库限制 数据库版本:当前支持 10、11、12 和 13 版本的 PostgreSQL 实例。 消费端限制 当消息订阅到 Kafka 时,具有以下限制条件:成功创建订阅任务后,不支持修改 Kafka Partition 的接收策略。 如果消费端为火山引擎 ECS 自建 Kafka 或消息队列 Kafka 版时,创建订阅任务后,请勿修改分区 Partition 的数量。 仅支持 SASL 认证且认证机制为 PLAIN,此处应指定为 PLAIN 机...
同步至火山引擎版 PostgreSQL
本场景介绍如何在数据库传输服务 DTS 控制台创建火山引擎 ECS 自建 PostgreSQL 同步至火山引擎版 PostgreSQL 任务。 前提条件已创建云数据库 PostgreSQL 版实例、数据库和账号。详细操作,请参见创建实例、创建数据... 当您想通过专线实现数据同步时,您可以提交工单联系技术人员。 使用限制应用限制类型 说明 源库 带宽要求:源库所属的服务器需具备足够出口带宽,否则将影响数据同步的速率。 待同步的表需具备主键或唯一非空约...
迁移至火山引擎专有网络 PostgreSQL
本场景介绍如何在数据库传输服务 DTS 控制台创建火山引擎 ECS 自建 PostgreSQL 迁移至火山引擎专有网络 PostgreSQL 任务。 前提条件已在火山引擎版 ECS 自建 PostgreSQL 中自行搭建实例、数据库和账号。 按需设置源端信息,具体如下所示: 在使用 VPN 实现数据迁移时,自建数据库所属的本地网络已通过 VPN 网关接入火山引擎。详细操作,请参见搭建云上VPC与云下多数据中心网络互通。 在需要使用专线实现数据迁移时,您需要搭建云上单...
基于云数据库 PostgreSQL 版构建智能交互式问答系统
本文就如何利用云数据库 PostgreSQL 版和大语言模型技术(Large Language Model,简称 LLM),实现企业级智能交互式问答系统进行介绍。通过本文,您将学习了解到:交互式问答系统原理、PostgreSQL 向量化存储和检索技术,... language plpgsqlas $$begin return query select doc_chunks.id, doc_chunks.content, (doc_chunks.embedding <> chunck_embedding) * -1 as similarity from doc_chunks -- chunk内容大于设定的长度...
