无需手动输入日期，实现Impala每日自动查询昨日数据

我来帮你搞定这个自动查询昨日数据的需求，其实有两种简单靠谱的方案，咱们分别说：

方案1：用Python生成昨日日期，嵌入SQL语句 #

你之前已经用pandas拿到了昨日日期，但要注意时间范围的准确性——24:00:00并不是标准的时间格式，Impala更认可次日00:00:00作为结束边界，这样用<代替BETWEEN能避免漏判或误判记录。

先写正确的日期生成代码：

import pandas as pd
from datetime import timedelta

# 获取昨日的起止时间（格式匹配你的Impala数据）
yesterday = pd.to_datetime('today') - timedelta(days=1)
yesterday_start = yesterday.strftime('%Y-%m-%d 00:00:00')
# 用次日0点作为结束，替代24:00:00
yesterday_end = (yesterday + timedelta(days=1)).strftime('%Y-%m-%d 00:00:00')

然后把日期变量嵌入到SQL里，这里推荐用参数化查询（比字符串拼接更安全，避免潜在的SQL注入风险），以impyla库为例：

# 构造带占位符的SQL，替换your_datetime_column为你实际的日期时间列名
sql_query = """
SELECT sourceaddress, count(sourceaddress) as count 
FROM table 
WHERE your_datetime_column >= %s 
  AND your_datetime_column < %s
GROUP BY sourceaddress 
ORDER BY count desc 
LIMIT 10
"""

# 执行查询时传入日期参数
cursor.execute(sql_query, (yesterday_start, yesterday_end))

如果你的驱动不支持%s占位符，也可以用f-string做简单拼接（适合无外部输入的场景）：

sql_query = f"""
SELECT sourceaddress, count(sourceaddress) as count 
FROM table 
WHERE your_datetime_column >= '{yesterday_start}' 
  AND your_datetime_column < '{yesterday_end}'
GROUP BY sourceaddress 
ORDER BY count desc 
LIMIT 10
"""
cursor.execute(sql_query)

方案2：直接用Impala内置日期函数，不用Python处理日期 #

这个方案更省心，直接让Impala自己计算昨日的时间范围，完全不需要Python生成日期，适合每日自动执行的场景：

sql_query = """
SELECT sourceaddress, count(sourceaddress) as count 
FROM table 
-- 用Impala函数直接取昨日0点到今日0点的范围
WHERE your_datetime_column >= date_sub(current_date(), 1) 
  AND your_datetime_column < current_date()
GROUP BY sourceaddress 
ORDER BY count desc 
LIMIT 10
"""
cursor.execute(sql_query)

date_sub(current_date(), 1)会返回Impala服务器时间的昨日日期，current_date()是今日日期，这样的时间范围和你手动写的BETWEEN 'xxxx-xx-xx 00:00:00' AND 'xxxx-xx-xx 24:00:00'效果完全一致，还更标准。

如果你的数据时区和Impala服务器时区不一致，可以换成current_timestamp()来计算，比如：

WHERE your_datetime_column >= date_sub(to_date(current_timestamp()), 1)
  AND your_datetime_column < to_date(current_timestamp())

两种方案选哪个？如果需要在Python里对日期做特殊处理（比如跳过节假日），就用方案1；如果只是简单的每日跑昨日数据，方案2更简洁不易出错。

内容的提问来源于stack exchange，提问作者sectechguy