在SSIS中使用临时表遇元数据错误的技术求助

背景与问题 #

• 数据存储在DatabaseA，无该库写入权限，仅能读取数据并创建临时表
• 业务逻辑需通过临时表生成自定义唯一标识符后完成计算，对应SQL在DatabaseA中运行仅需2.5小时；改用CTE在SSIS中执行时，耗时超过24小时仍未完成
• 自有DatabaseB仅能存储最终结果，无法承接中间计算步骤（空间不足）
• 在SSIS中运行含临时表的SQL时，触发元数据错误，即使简化测试代码（创建临时表→插入数据→查询）也无法解决

补充说明 #

已尝试《在SSIS包中使用临时表》相关方案，但因无DatabaseA写入权限无法使用存储过程，问题仍未解决

核心SQL逻辑示例 #

Select
*
into #A
from A where abc

Select
*
into #B
from B where dce

Select
*
into #C
from C where fgh

select
...
into #D
from #C join #A on...join (#C) #B on where ijk...

Select
...
from #D join E on... where xyz

解决方案思路 #

1. 封装完整批处理SQL，规避元数据提前解析 #

• 将所有临时表的创建、数据插入、最终查询逻辑封装为单批SQL语句，开头添加SET NOCOUNT ON;，避免SSIS在执行过程中中途解析临时表元数据。示例：

SET NOCOUNT ON;
Select * into #A from A where abc;
Select * into #B from B where dce;
Select * into #C from C where fgh;
select ... into #D from #C join #A on...join (#C) #B on where ijk...;
-- 最终输出结果
Select ... from #D join E on... where xyz;

• 在SSIS的OLE DB源组件中选择「SQL命令」模式，直接执行上述完整批处理语句。

2. 启用延迟验证 #

• 在SSIS的OLE DB源组件属性中，将延迟验证设置为True。让SSIS在运行阶段才去获取最终结果集的元数据，绕过设计阶段因临时表不存在导致的元数据错误。

3. 改用全局临时表（谨慎使用） #

• 将局部临时表#A替换为全局临时表##A，全局临时表在会话结束前对所有连接可见，SSIS可识别其元数据。注意：若存在多包并发运行场景，可能出现表名冲突，需确保运行时无并发操作。

4. 直接将结果写入DatabaseB #

• 若上述方法仍有问题，可在SQL语句末尾直接将最终结果插入DatabaseB的目标表（需确保有该库写入权限），示例：

SET NOCOUNT ON;
-- 所有临时表逻辑
Select * into #A from A where abc;
...
-- 直接写入目标库
INSERT INTO DatabaseB.dbo.FinalResult (...)
SELECT ... from #D join E on... where xyz;

• 此时SSIS仅需执行该SQL命令，无需处理结果集的元数据问题，只需验证SQL执行成功即可。

内容的提问来源于stack exchange，提问作者RamenZzz