Python提取Firebird数据库数据时遇UTF-8解码错误求助

针对你遇到的'utf-8' codec can't decode byte 0xe3错误，从以下几个方向排查：

1. 确认数据库实际字符集 #

0xe3这个字节在ISO-8859-1中对应字符ã，但在UTF-8中它只是多字节字符的开头（比如ã的UTF-8编码是0xc30xa3），所以首先要确定Firebird数据库创建时的默认字符集。
用Firebird的命令行工具isql执行以下查询：

SELECT RDB$CHARACTER_SET_NAME FROM RDB$DATABASE;

根据返回结果调整连接时的charset参数，比如返回WIN1252就设为WIN1252，返回UTF8就设为UTF8。

2. 修正连接的charset参数 #

把代码中的charset = 'ISO8859_1'替换为数据库实际的字符集，比如：

self.connection = fdb.connect(
    host = conn_id.host,
    port = conn_id.port,
    database = schema,
    user = conn_id.login,
    password = password,
    charset = 'WIN1252'  # 换成查询到的数据库字符集
)

3. 排查unquote操作的编码问题 #

你用unquote处理schema和password，要确认解码后的字符串是否正确。可以在unquote后打印字节值验证：

schema = unquote(conn_id.schema)
print(repr(schema.encode('ISO8859_1')))  # 查看字节是否包含0xe3

如果unquote后的字符串本身编码混乱，可能需要先将conn_id的原始值按正确编码转成字节再unquote，比如：

from urllib.parse import unquote_to_bytes

schema_bytes = unquote_to_bytes(conn_id.schema)
schema = schema_bytes.decode('ISO8859_1')  # 换成数据库对应的字符集

4. 绕过Airflow连接管理做测试 #

写一个极简的测试脚本，直接硬编码连接参数，排除Airflow conn_id的干扰：

import fdb

# 替换为你的实际数据库参数
conn = fdb.connect(
    host='127.0.0.1',
    port=3050,
    database='/path/to/your/db.fdb',
    user='sysdba',
    password='masterkey',
    charset='WIN1252'
)

cursor = conn.cursor()
cursor.execute('SELECT FIRST 1 * FROM your_table')
print(cursor.fetchone())
conn.close()

如果这个脚本能正常运行，说明问题出在Airflow的连接参数处理环节，重点排查conn_id的编码和解码逻辑。

内容的提问来源于stack exchange，提问作者Daniel Silva Souza