2012 MSSQL作业向MySQL插入数据时偶发失败求助

针对你遇到的MSSQL 2012通过SSIS VB脚本+MSDASQL链接服务器向MySQL插入数据时，偶发部分插入后失败的问题，以下是具体的排查和解决步骤：

一、定位触发错误的具体数据 #

• 将原批量INSERT INTO OPENQUERY语句拆分为单条插入，或在SSIS包中启用错误输出组件，捕获并记录失败的行数据（包括sql_id）。偶发失败大概率是某几条脏数据（如超长字符、特殊符号、违反MySQL表约束的NULL值）触发，但MSDASQL会屏蔽具体错误信息，导致批量操作中断。
• 临时修改SSIS逻辑：先将待同步数据写入MSSQL临时表，再逐行调用OPENQUERY插入，同时记录每一行的执行状态，精准定位问题数据。

二、修复MSDASQL链接服务器配置 #

• 确认链接服务器的RPC和RPC Out选项已启用：在SSMS中依次进入「服务器对象→链接服务器→MySQL→属性→服务器选项」，勾选这两项，这是跨服务器调用的必要前提。
• 替换为MySQL官方ODBC驱动：MSDASQL作为桥接层兼容性差，建议卸载旧驱动，安装MySQL ODBC 8.0 Driver，重新配置链接服务器（选择Microsoft OLE DB Provider for ODBC Drivers，指向新创建的MySQL ODBC数据源）。
• 调整ODBC超时设置：在ODBC数据源管理器中找到对应MySQL的DSN，将「查询超时」「连接超时」设置为更大值（如300秒），避免批量操作时因超时断开连接。

三、排查MySQL端的底层问题 #

• 查看MySQL错误日志：直接查看MySQL的错误日志文件（Windows路径一般为C:\ProgramData\MySQL\MySQL Server X.X\data\hostname.err，Linux为/var/log/mysql/error.log），MSDASQL屏蔽的具体错误（如死锁、主键冲突、字段长度溢出、表锁超时）会在这里体现。
• 检查目标表约束：确认MySQL表的主键/唯一索引是否存在重复sql_id的情况，若存在，可在INSERT语句中添加ON DUPLICATE KEY UPDATE避免中断，或提前在MSSQL端过滤重复数据。
• 检查MySQL连接数限制：执行SHOW VARIABLES LIKE 'max_connections';查看最大连接数，若SSIS作业并发运行导致连接耗尽，需调整max_connections值。

四、优化SSIS执行逻辑 #

• 替换OPENQUERY为SSIS原生数据流：放弃VB脚本+OPENQUERY的方式，改用SSIS的OLE DB源（连接MSSQL） + **ODBC目标（连接MySQL）**的数据流任务，原生数据流支持批量提交、错误行捕获，稳定性远高于远程SQL调用。
• 调整事务与批次：若当前使用分布式事务（MSDTC），可尝试关闭事务支持，或将批量插入拆分为小批次（如每1000条提交一次），降低单次操作的资源压力。
• 检查VB脚本的连接管理：若脚本中手动创建了数据库连接，确保每次操作后正确释放连接资源，避免连接泄漏导致后续操作失败。

五、稳定性测试与监控 #

• 编写循环测试作业：创建一个测试作业，循环插入100条测试数据，持续运行几小时，复现错误的同时监控MSSQL和MySQL的CPU、内存、磁盘IO，排查资源瓶颈。
• 查看MSSQL等待事件：执行DBCC SQLPERF('sys.dm_os_wait_stats')，检查是否存在大量OLEDB相关的等待事件，判断是否为链接服务器的通信问题。

内容的提问来源于stack exchange，提问作者Scott