解决PHP中SQL的"Incorrect string value"错误（非数据库端）

我明白你不想动数据库配置的想法——毕竟有时候我们更希望在数据处理环节把问题掐灭，而不是去调整后端环境。针对你遇到的插入无效字符的问题，我有几个纯数据预处理层面的解决方案，你可以试试：

1. 过滤无效UTF-8字符 #

错误里的\xEF\xBC\x89其实是全角右括号的编码，大概率是你的数据库字符集（比如utf8而非utf8mb4）不兼容这类字符。你可以在解析文本时直接过滤掉无法被正确编码的内容，以Python为例：

def clean_invalid_chars(text):
    # 忽略无法编码为UTF-8的字符，也可以用'replace'替换成占位符
    return text.encode('utf-8', 'ignore').decode('utf-8')

处理后的字符串就能正常插入数据库，不会触发编码错误。

2. 精准替换特定问题字符 #

既然只有30行出问题，你可以针对性替换那些数据库不接受的特殊字符。比如把全角符号替换成对应的半角版本：

# 全角右括号(\uFF09)替换为半角右括号
cleaned_company = company.replace('\uFF09', ')')

这种方式既能保留原内容的语义，又能解决编码兼容问题。

3. 提前校验编码合法性 #

在插入前先检查字符串是否符合数据库的编码要求，把有问题的行提前筛选处理：

def is_valid_for_db(text):
    try:
        # 模拟数据库的编码校验，比如数据库用utf8就用这个编码测试
        text.encode('utf-8')
        return True
    except UnicodeEncodeError:
        return False

# 处理每行数据时
if not is_valid_for_db(company):
    company = clean_invalid_chars(company)
    # 也可以标记该行，后续手动检查处理

额外提醒：确认文本文件编码 #

有时候问题根源是你解析文件时用错了编码——比如文件实际是GBK编码，你却用UTF-8读取，就会产生乱码和无效字符。打开文件时一定要指定正确编码：

with open('your_data_file.txt', 'r', encoding='gbk') as f:
    lines = f.readlines()

这些方法都不需要改动数据库配置，完全在数据插入前完成处理，应该能解决你的问题。

内容的提问来源于stack exchange，提问作者l008com