如何实现DynamoDB查询先按带时间戳排序键排序再返回无时间戳项？

问题背景 #

现有DynamoDB表，数据示例如下：

{
  id: '123-abc-def',
  organisationId: '321-def-1ab',
  status: "Active",
  statusDateSortKey: "USED#"
},
{
  id: '123-abc-321',
  organisationId: '321-def-1ab',
  status: "Used",
  statusDateSortKey: "USED#1693321262"
}

已创建以organisationId为分区键、statusDateSortKey为排序键的GSI。当前按statusDateSortKey升序查询时，无时间戳的USED#项会排在最前，不符合需求——需要先按时间戳正/倒序排列带时间戳的项，再返回无时间戳项。若移除无时间戳项的statusDateSortKey，排序正常但无法查询到这类数据。

可行解决方案 #

1. 修改无时间戳项的排序键值（推荐，无额外查询开销） #

利用DynamoDB字典序排序的特性，给无时间戳项设置一个极端值的排序键，让它在排序时落在所有有效时间戳项之后：

• 升序场景：将无时间戳项的statusDateSortKey设为USED#9999999999（一个远超未来的时间戳，比如2037年之后），这样升序排序时，正常时间戳的项会从小到大排列，最后才是这个极端值的项。
• 倒序场景：将无时间戳项的statusDateSortKey设为USED#0000000000，倒序排序时，正常时间戳从大到小排列，最后是这个极小值的项。

修改后数据示例：

{
  id: '123-abc-def',
  organisationId: '321-def-1ab',
  status: "Active",
  statusDateSortKey: "USED#9999999999"
}

2. 两次查询合并结果（无需修改数据） #

如果无法修改现有数据，可以分两次查询后在应用层合并结果：

• 第一次查询：筛选出带时间戳的项，用条件表达式statusDateSortKey > "USED#"（因为USED#1693321262字典序大于USED#），按需要的正/倒序排序。
• 第二次查询：筛选出无时间戳的项，用条件表达式statusDateSortKey = "USED#"。
• 合并结果：将第一次查询的结果放在前面，第二次的结果追加在后面。

注意：如果数据量较大，需要处理分页逻辑，确保两次查询的分页参数一致，避免遗漏数据。

3. 调整GSI结构（适合数据迁移成本低的场景） #

如果允许调整GSI设计，可以拆分排序键的语义：

• 例如将排序键设为USED:TIMESTAMP#1693321262（带时间戳项）和USED:NO_TIMESTAMP（无时间戳项），这样字典序上USED:TIMESTAMP开头的项会全部排在USED:NO_TIMESTAMP之前，直接查询即可得到符合要求的排序结果。

内容的提问来源于stack exchange，提问作者Jarede