微服务架构下层级数据高效查询方案咨询

场景与权限规则 #

我搭建了一套包含用户服务与设备服务的微服务系统，系统内存在层级组织数据：

数据按组织隔离，权限规则如下：

• OrgA的用户可查看所有组织（含OrgB、OrgC、OrgD、OrgE、OrgF、OrgG）的数据
• OrgG的用户仅能查看自身组织的数据

数据库表结构 #

organization表（嵌套集合+邻接表混合模型） #

CREATE TABLE organization (
  id serial primary key,
  name varchar(50),
  parent_id int,
  lft int,
  rgh int
);

user表 #

CREATE TABLE user (
  id serial primary key,
  name varchar(20),
  org_id int
);

device表 #

CREATE TABLE device (
  id serial primary key,
  mac varchar(20),
  org_id int
);

当前实现与性能痛点 #

我已在用户服务中实现API，利用嵌套集合模型查询用户有权限的组织ID列表：

SELECT p.id
FROM organization as p
INNER JOIN user as u ON u.org_id = p.id
INNER JOIN organization as c ON p.lft <= c.lft AND p.rgh >= c.rgh;

设备服务查询授权设备时，需要先调用该API获取组织ID列表，再执行以下SQL过滤：

SELECT * FROM device WHERE org_id IN ([MY-AUTHORIZED-ORGANIZAITON-ID-LIST]);

但当组织层级较深、授权组织数量较多时，IN操作会导致数据库性能下降，想请教在微服务架构下如何高效实现这类层级数据的权限查询？

1. 直接关联查询替代IN子句 #

放弃先拉取组织ID列表的方式，让设备服务直接通过关联嵌套集合逻辑完成权限过滤（若设备服务可访问用户/组织表，或通过数据库视图、联邦查询实现跨服务数据关联）：

SELECT d.*
FROM device d
JOIN organization c ON d.org_id = c.id
JOIN organization p ON p.lft <= c.lft AND p.rgh >= c.rgh
JOIN "user" u ON u.org_id = p.id
WHERE u.id = [当前用户ID];

同时给organization(lft, rgh)、device(org_id)、user(org_id)建立联合索引，大幅提升关联查询效率。

2. 缓存授权组织ID集合 #

针对用户的授权组织列表做缓存优化：

• 用户登录或组织权限变更时，异步计算并缓存该用户的所有授权组织ID（用Redis的Set类型存储）
• 设备服务查询时直接从缓存获取ID集合，再执行IN查询；缓存命中时可避免重复调用用户服务和嵌套集合计算
• 缓存失效策略：组织架构变更、用户所属组织变更时主动更新缓存

3. 预计算并存储用户权限范围 #

新增user_org_permission表，或扩展user表字段，预计算并存储每个用户有权访问的所有组织ID：

• 当组织架构变更时，通过定时任务或事件驱动的方式，批量更新受影响用户的权限组织列表
• 设备服务查询时直接关联该表：

SELECT d.*
FROM device d
JOIN user_org_permission up ON d.org_id = up.org_id
WHERE up.user_id = [当前用户ID];

这种方式把复杂的层级计算提前完成，查询时只需简单关联，性能最优，但要注意维护权限数据的一致性。

4. 传递权限上下文而非ID列表 #

设备服务调用用户服务时，传递用户ID，让用户服务返回权限过滤的范围条件（比如当前用户所属组织的lft和rgh值），设备服务直接用该条件查询：

SELECT d.*
FROM device d
JOIN organization c ON d.org_id = c.id
WHERE c.lft >= [用户组织lft] AND c.rgh <= [用户组织rgh];

这种方式避免传递大量ID，减少网络开销，同时利用嵌套集合的范围查询优势。

内容的提问来源于stack exchange，提问作者Enix