Python人员规划预测模型输出写入Oracle数据库时DPI-1044错误的数据格式处理咨询

你遇到的DPI-1044: value cannot be represented as an Oracle number错误，核心原因确实是预测输出的数值格式和Oracle表的字段类型不兼容——尤其是那些极小的科学计数法数值（比如1.91644748735735E-30），或者未处理的空值导致的。下面是几个针对性的解决办法：

1. 过滤/转换极小数值 #

Oracle的NUMBER类型有精度范围限制，极小的接近0的数值会超出其可表示范围。你可以把这些值直接替换为0，或者四舍五入到合理的小数位：

# 替换极小值（小于1e-9的都转为0）
transfer_in_full['predicted_arima'] = np.where(
    transfer_in_full['predicted_arima'].abs() < 1e-9, 
    0, 
    transfer_in_full['predicted_arima']
)
# 对其他数值列做同样处理
for col in ['predicted_ucm', 'arima_error', 'ucm_error', 'prophet_error', 'lowesterror']:
    transfer_in_full[col] = np.where(
        transfer_in_full[col].abs() < 1e-9, 
        0, 
        transfer_in_full[col]
    )

2. 正确处理空值 #

Pandas的NaN在写入Oracle时可能会被错误解析，建议统一转换为Oracle兼容的空值：

# 将所有NaN替换为None（Oracle能识别的空值）
transfer_in_full = transfer_in_full.where(pd.notnull(transfer_in_full), None)

3. 显式指定数值列的SQLAlchemy数据类型 #

之前你只处理了object类型的列，数值列也需要明确指定Oracle兼容的类型，避免自动转换出错。比如用sqlalchemy.types.Numeric指定精度和小数位：

from sqlalchemy import types

# 先处理object类型列
dtyp = {c: types.VARCHAR(transfer_in_full[c].str.len().max()) 
        for c in transfer_in_full.columns[transfer_in_full.dtypes == 'object'].tolist()}

# 为数值列添加明确的类型定义（根据你的表结构调整精度和小数位）
numeric_cols = ['predicted_arima', 'predicted_ucm', 'arima_error', 'ucm_error', 'prophet_error', 'lowesterror', 'count']
for col in numeric_cols:
    dtyp[col] = types.Numeric(precision=18, scale=6)  # 精度和小数位可以根据实际需求调整

# 再执行写入
transfer_in_full.to_sql(
    'TRANSFER_IN_FORECAST', 
    engine, 
    if_exists='append', 
    index=False,
    schema='HIM_PA_EXTERN_PROD',
    dtype=dtyp
)

4. 额外验证：检查数值列的极值 #

在写入前可以先排查数值列的最大/最小值，确认是否有超出Oracle范围的情况：

# 查看数值列的极值
numeric_cols = ['predicted_arima', 'predicted_ucm', 'arima_error', 'ucm_error', 'prophet_error', 'lowesterror', 'count']
for col in numeric_cols:
    print(f"{col}: min={transfer_in_full[col].min()}, max={transfer_in_full[col].max()}")

把这些步骤整合到你的代码中，应该就能解决这个写入错误了。

内容的提问来源于stack exchange，提问作者Biplab1985