如何在PostgreSQL带unique约束的列中插入超3K字符长文本

问题解答 #

• 是否有办法禁用该btree报错？
  没有可行的禁用方案。这个是PostgreSQL btree索引的固有设计限制：默认8KB数据页的场景下，单个索引项的大小最大不能超过页大小的1/3（即2704字节），属于内核层面的硬限制。如果强行修改源码重编译绕过该限制，会导致索引性能骤降、甚至出现数据损坏的问题，完全不推荐操作。

• 是否应该移除unique约束，仅在应用层做唯一性校验？
  不推荐该方案。应用层的校验无法避免并发写入场景下的竞态问题，很容易出现重复数据，除非你能保证所有写入都严格走同一套逻辑且额外加了全局分布式锁，否则数据一致性的保障能力远不如数据库层面的原生约束。

• 是否需要对存储的所有URL做压缩处理？
  不需要专门做压缩。压缩不仅会额外增加读写时的编解码开销，而且如果压缩后的内容长度仍然超过btree索引限制，还是会触发报错，属于性价比很低的解决方案。

• 该需求是否完全无法通过PostgreSQL实现？
  完全可以实现，官方报错提示中已经给出了可行方向，最优方案是基于URL的哈希值做唯一约束：

CREATE TABLE website (
    url text NOT NULL,
    -- 自动生成URL的MD5哈希作为唯一校验字段，也可替换为SHA256降低哈希碰撞概率
    url_hash char(32) UNIQUE NOT NULL GENERATED ALWAYS AS (md5(url)) STORED
);

该方案中哈希值长度固定、远小于btree索引限制，数据库会自动维护哈希值的生成和校验，既保证了URL的唯一性，也没有文本长度限制，性能和可靠性都有保障。

内容的提问来源于stack exchange，提问作者francistheturd