如何通过DBeaver的CSV导入功能将长字符串存入Oracle BLOB列

我需要用DBeaver的CSV导入功能，把CSV里的超长字符串存入Oracle数据库的BLOB字段。因为无法直接将字符串存入BLOB，我用Pandas将字符串转成UTF-8二进制再转十六进制，代码如下：

df['long_string'].apply(lambda x:x.encode('utf-8').hex() if x is not None else x) 
df.to_csv(filename, index=False, header=True,encoding='utf-8-sig',quoting=csv.QUOTE_ALL)

但导出后，long_string列的超长值被截断，剩余内容跑到下一行，导致导入失败。DBeaver的CSV导入功能不支持指定列的二进制与十六进制转换，所以只能先处理CSV单元格数据。

方法1：修复Pandas导出CSV的截断问题 #

Pandas导出时超长内容换行，是默认配置导致的，修改参数确保长内容被完整包裹：

import csv
import pandas as pd

df['long_string'] = df['long_string'].apply(lambda x: x.encode('utf-8').hex() if pd.notna(x) else x)
df.to_csv(
    filename,
    index=False,
    header=True,
    encoding='utf-8-sig',
    quoting=csv.QUOTE_ALL,
    quotechar='"',
    lineterminator='\r\n',
    chunksize=None  # 禁用分块，避免长内容被拆分
)

导出后的CSV中，超长十六进制字符串会被完整放在引号内，不会被截断换行。

方法2：用原生CSV模块逐行写入 #

如果Pandas仍有问题，直接用Python原生csv模块写入，彻底避免格式异常：

import csv
import pandas as pd

with open(filename, 'w', encoding='utf-8-sig', newline='') as f:
    writer = csv.writer(f, quoting=csv.QUOTE_ALL, quotechar='"')
    # 写入表头
    writer.writerow(df.columns)
    # 逐行处理并写入数据
    for _, row in df.iterrows():
        long_str = row['long_string']
        if pd.notna(long_str):
            row['long_string'] = long_str.encode('utf-8').hex()
        writer.writerow(row.tolist())

newline=''是CSV模块的推荐设置，可避免额外换行符干扰。

方法3：导入时用Oracle函数转换 #

虽然DBeaver不支持自动转换，但可以在导入向导中修改字段映射逻辑：

1. 进入DBeaver CSV导入向导的字段映射步骤
2. 找到long_string列，将目标BLOB字段的赋值表达式改为HEXTORAW(?)
   • ?代表CSV中的十六进制字符串，Oracle的HEXTORAW会将其转为RAW类型，可直接存入BLOB
3. 确保CSV中的long_string列已提前转成十六进制格式

这种方法无需担心CSV导出截断，DBeaver会完整读取引号内的内容传入函数。

方法4：跳过CSV，直接用Python写入Oracle #

如果CSV中转容易出问题，用cx_Oracle直接将DataFrame数据写入BLOB字段，更可靠：

import cx_Oracle
import pandas as pd

# 建立Oracle连接
conn = cx_Oracle.connect('用户名/密码@主机:端口/服务名')
cursor = conn.cursor()

# 插入语句
insert_sql = "INSERT INTO 你的表名 (id, long_string_blob) VALUES (:1, :2)"

# 逐行插入
for _, row in df.iterrows():
    id_val = row['id']
    long_str = row['long_string']
    blob_val = long_str.encode('utf-8') if pd.notna(long_str) else None
    cursor.execute(insert_sql, (id_val, blob_val))

conn.commit()
cursor.close()
conn.close()

这种方式无需转十六进制，直接传入二进制数据，完全规避CSV格式问题。

内容的提问来源于stack exchange，提问作者JunGeol