如何在Palantir Foundry Contour中用Spark SQL拼接子串转换日期格式

针对你需要将TEXTVALUE字段的"202411219999"转换为"2024-11-21"的需求，以下两种基于子串拼接的Spark SQL方案都可以实现：

方法一：使用concat()手动拼接 #

通过substring分别提取年、月、日的子串，再用concat将子串与分隔符-拼接：

SELECT 
  TEXTVALUE,
  concat(
    substring(TEXTVALUE, 1, 4),  -- 提取年份：前4位
    '-',
    substring(TEXTVALUE, 5, 2),  -- 提取月份：第5-6位
    '-',
    substring(TEXTVALUE, 7, 2)   -- 提取日期：第7-8位
  ) AS NEWVALUE
FROM your_table_name;

方法二：使用concat_ws()简化拼接 #

concat_ws会以指定的分隔符自动拼接多个字符串，无需重复写分隔符，代码更简洁：

SELECT 
  TEXTVALUE,
  concat_ws(
    '-',  -- 指定分隔符
    substring(TEXTVALUE, 1, 4),
    substring(TEXTVALUE, 5, 2),
    substring(TEXTVALUE, 7, 2)
  ) AS NEWVALUE
FROM your_table_name;

扩展：更规范的日期转换方式 #

如果场景是日期格式转换，还可以先将前8位字符转为日期类型，再格式化输出，这种方法更严谨（避免子串截取逻辑出错）：

SELECT 
  TEXTVALUE,
  date_format(to_date(substring(TEXTVALUE, 1, 8), 'yyyyMMdd'), 'yyyy-MM-dd') AS NEWVALUE
FROM your_table_name;

内容的提问来源于stack exchange，提问作者Turpan