Databricks SQL如何查询名称以@开头的字段(如@timestamp)
可行解决方法
- 方法1:直接使用标准Spark SQL语法查询(Databricks SQL默认完全兼容Spark SQL规则),查询含特殊字符的字段时用反引号包裹字段名即可,示例语句:
SELECT `@timestamp` FROM tempview;
该语法是Hive/Spark生态下的通用特殊字段引用规则,可直接规避@前缀被识别为SQL变量预留语法的问题。
- 方法2:在生成临时视图的前置步骤重命名字段,从根源规避特殊字符问题
现有流程允许在Python扫描生成DataFrame后再创建临时视图,你可以在创建视图前调整列名,将含特殊字符的字段修改为符合SQL命名规范的名称,示例Python代码:
# 替换df为你已加载的原始DataFrame实例 df = df.withColumnRenamed("@timestamp", "log_timestamp") # 后续正常执行创建临时视图操作即可 df.createOrReplaceTempView("tempview")
调整后直接用SELECT log_timestamp FROM tempview即可查询,无需额外处理特殊字符,更适合后续高频查询该字段的场景。
内容的提问来源于stack exchange,提问作者Erik Warming
相关产品推荐
相关产品推荐

