SSIS中MariaDB无法使用Lookup的替代方案及驱动识别方法
MariaDB下SSIS Lookup组件问题的解决办法
一、让Lookup组件识别ODBC驱动的方法
- 匹配驱动与SSIS运行位数:SSIS默认以32位模式运行(即使系统是64位),需在
C:\Windows\SysWOW64\odbcad32.exe中配置32位MariaDB ODBC数据源;若强制用64位运行SSIS,就在C:\Windows\System32\odbcad32.exe配置64位数据源,确保两者位数一致。 - 手动绑定连接管理器:在Lookup组件的连接设置中,不使用自动检测,手动选择已配置完成且测试连接成功的ODBC连接。
- 更新组件与驱动:安装最新版MariaDB ODBC驱动,同时确保SSIS所属的SQL Server Integration Services为较新版本,修复兼容性bug。
二、Lookup功能的替代实现方案
1. 数据源端直接执行关联SQL
直接在MariaDB的ODBC源组件中编写关联查询,将关联结果作为数据流的输入,彻底绕开SSIS组件的兼容性问题:
SELECT t1.ID, t1.Name, t1.Fname, t2.AnotherId FROM 表1 t1 LEFT JOIN 表2 t2 ON t1.ID = t2.ID
根据需求可替换为INNER JOIN,这种方式性能最优,且不会出现笛卡尔积问题。
2. 正确配置Merge Join组件
之前出现笛卡尔积是因为未对输入流按关联字段排序,正确步骤:
- 给表1、表2的数据源分别添加排序组件,均按
ID字段升序排序,确保排序后的输出作为Merge Join的两个输入源。 - 配置Merge Join组件时,选择对应连接类型(内连接/左外连接),将两个输入的
ID字段设置为关联键,避免选错关联字段。
3. 脚本组件实现自定义Lookup
适合小数据集场景,步骤:
- 在数据流中添加脚本组件(作为转换),将表1的所有字段设为输入列,添加一个
AnotherId输出列。 - 在脚本编辑器中,预先加载表2的所有数据到内存字典(如C#中的
Dictionary<int, string>,键为ID,值为AnotherId)。 - 对每一行表1的输入数据,通过
ID从字典中匹配对应值,赋值给输出列AnotherId。
内容的提问来源于stack exchange,提问作者Sadabadi
相关产品推荐
相关产品推荐

