BigQuery中@DS_END_DATE变量丢失当日时段数据的解决问询

问题原因 #

你当前的查询里，PARSE_DATE('%Y%m%d', @DS_END_DATE)会把用户选择的结束日期转换为仅含日期、不带时间的类型（比如2022-10-20等价于2022-10-20 00:00:00）。而creation_date是带时分秒的时间字段，BETWEEN会把上限限定在结束日期的零点，自然漏掉了当天其他时段的数据。

解决方案 #

以下两种方法都能解决这个问题，可根据你的需求选择：

方法1：基于时间戳的范围过滤（精确包含当日所有时间）

将结束日期转换为时间戳后加1天，用<代替BETWEEN的上限，这样就能包含结束日期当天从00:00:00到23:59:59.999...的所有数据：

WHERE 
   creation_date IN (NULL, '1970-01-01T00:00:00') OR 
   (
      creation_date >= PARSE_TIMESTAMP('%Y-%m-%d', @DS_START_DATE) 
      AND creation_date < TIMESTAMP_ADD(PARSE_TIMESTAMP('%Y-%m-%d', @DS_END_DATE), INTERVAL 1 DAY)
   )

• 原理：TIMESTAMP_ADD(..., INTERVAL 1 DAY)会把2022-10-20变成2022-10-21 00:00:00，creation_date < 2022-10-21 00:00:00就包含了2022-10-20的所有时段数据。

方法2：基于日期类型的匹配（忽略时间部分）

直接提取creation_date的日期部分，和用户选择的日期范围做比较，只要日期在范围内就包含，不管具体时间：

WHERE 
   creation_date IN (NULL, '1970-01-01T00:00:00') OR 
   DATE(creation_date) BETWEEN PARSE_DATE('%Y%m%d', @DS_START_DATE) AND PARSE_DATE('%Y%m%d', @DS_END_DATE)

• 原理：DATE(creation_date)会把带时间的字段转换为仅日期的类型（比如2022-10-20T14:03:08变成2022-10-20），这样和@DS_END_DATE转换后的日期直接匹配即可。

注意事项 #

• 两种方法都保留了你原有的creation_date IN (NULL, '1970-01-01T00:00:00')逻辑，不影响已删除ID的识别。
• 如果creation_date是DATETIME类型，把方法1里的PARSE_TIMESTAMP换成PARSE_DATETIME，TIMESTAMP_ADD换成DATETIME_ADD即可。

内容的提问来源于stack exchange，提问作者DimitFromCave