使用Python从Oracle导出数据到CSV,实现每日更新仅保留当日数据
解决方案
一、代码修改(实现CSV仅保留当日数据)
你现有代码调用to_csv()时默认使用覆盖写入模式,本身不会追加历史内容,你需要补充仅拉取当日数据的查询逻辑,修改后代码如下:
import datetime import pandas as pd import cx_Oracle # 建立数据库连接 con = cx_Oracle.connect('SYSTEM/oracle123@localhost:1521/xe') # 两种过滤当日数据的方式二选一即可: # 方式1:用Oracle自带系统日期过滤,避免Python和数据库时区不一致问题,适合stat_date是带时分秒的datetime类型 # sql = "select * from covid_data where trunc(stat_date) = trunc(sysdate)" # 方式2:Python传当日日期过滤,适合stat_date是字符串/日期类型格式为YYYY-MM-DD的场景 today = datetime.date.today() sql = f"select * from covid_data where stat_date = '{today}'" # 读取数据 t = pd.read_sql(sql, con) # 显式指定mode='w'覆盖写入确保旧内容被清空,index=False可去掉默认导出的行号,不需要可删除 t.to_csv(r'C:\Users\abc\covid.csv', mode='w', index=False, encoding='utf-8-sig') # 关闭数据库连接 con.close()
如果你需要每天生成独立的CSV文件留存,避免覆盖历史文件,可以将导出路径改为带日期后缀的格式:
csv_path = fr'C:\Users\abc\covid_{today.strftime("%Y%m%d")}.csv' t.to_csv(csv_path, mode='w', index=False, encoding='utf-8-sig')
二、配置每日自动运行
Windows系统
- 打开「任务计划程序」,选择创建基本任务
- 触发器设置为每天你需要运行脚本的时间点
- 操作选择「启动程序」,程序或脚本填写你本地python.exe的完整路径,添加参数填写你的脚本文件的完整路径
Linux系统
- 执行
crontab -e编辑定时任务规则 - 添加规则(示例为每天凌晨2点运行,自行修改路径和时间即可):
0 2 * * * /usr/bin/python3 /opt/your_script_path.py
内容的提问来源于stack exchange,提问作者user14937341
相关产品推荐
相关产品推荐

