使用pandasql执行提取时间小时的SQL查询时报OperationalError语法错误
报错原因定位
pandasql默认以SQLite为执行引擎,SQLite不支持ANSI SQL中EXTRACT(时间单位 FROM 时间列)的语法结构。当解析你编写的查询语句时,引擎无法识别HOUR FROM dTime这段内容的语法规则,因此抛出near "FROM": syntax error的异常。
你原SQL使用的EXTRACT语法是PostgreSQL、Hive等数据库的通用写法,和pandasql底层的SQLite语法体系不兼容,这是触发报错的核心原因。
对应解决方案
改用SQLite原生支持的时间处理函数提取小时值即可,针对你存储的2019-02-15 03:44:27格式的时间列,有两种可正常运行的写法:
- 全版本兼容写法(适配所有SQLite版本):使用
strftime函数实现时间格式化,该写法对字符串格式时间、pandas datetime类型的时间列均可正常解析。如果觉得单引号转义麻烦,可以用三引号包裹SQL字符串提升可读性,代码示例:
说明:格式化占位符# 三引号包裹SQL,无需处理单引号转义 q = """ SELECT CAST(strftime('%H', dTime) AS INTEGER) as hour FROM data """ output = pandasql.sqldf(q, globals())%H会返回00-23范围的24小时制小时值,使用CAST将返回的字符串转为整数,方便后续数值计算。 - 高版本简化写法(适配SQLite 3.38.0及以上版本):直接调用原生
hour()函数提取小时值,代码更简洁:q = 'SELECT hour(dTime) as hour FROM data' output = pandasql.sqldf(q, globals())
注意:无论dTime列在pandas中是字符串类型还是datetime64类型,上述两种写法均可正常工作,pandasql在传递数据到SQLite后端时,会自动将datetime类型转换为SQLite可识别的标准ISO时间字符串格式。
内容的提问来源于stack exchange,提问作者Eni
相关产品推荐
相关产品推荐

