基于BIML实现XMLSource多输出路径自动生成OleDbDestination

我之前也碰到过这种重复编写Destination节点的麻烦场景，你提到的AstXMLSourceNode.DataflowOutputs属性确实是解决这个问题的关键，它能帮我们遍历XML源的所有输出路径，从而动态生成对应的OleDbDestination，不用手动重复配置。

下面是一个可行的实现方案，你可以参考调整：

<Biml xmlns="http://schemas.varigence.com/biml.xsd">
    <Connections>
        <!-- 配置你的Staging数据库连接 -->
        <OleDbConnection Name="StagingConn" ConnectionString="你的Staging库连接字符串" />
        <!-- 配置XML文件连接 -->
        <FlatFileConnection Name="XmlSourceConn" FilePath="你的XML文件路径" FileFormat="XmlFileFormat" />
    </Connections>
    <FileFormats>
        <XmlFileFormat Name="XmlFileFormat">
            <!-- 这里配置你的XML文件结构，确保生成2个输出路径 -->
            <Columns>
                <!-- 根据你的XML结构定义列 -->
            </Columns>
        </XmlFileFormat>
    </FileFormats>
    <Packages>
        <Package Name="DynamicMultiOutputPackage">
            <Tasks>
                <Dataflow Name="MultiOutputDataflow">
                    <Transformations>
                        <!-- 定义XML源节点 -->
                        <XmlSource Name="XML Source" ConnectionName="XmlSourceConn" />
                        
                        <!-- 用BIML脚本遍历XML源的所有输出路径，动态创建OleDbDestination -->
                        <# 
                            // 获取XML源节点
                            var xmlSource = Transformations.OfType<AstXmlSourceNode>().First();
                            // 遍历每个输出路径
                            foreach (var output in xmlSource.DataflowOutputs)
                            {
                                // 输出路径的名称就是Staging库中对应的表名
                                var tableName = output.Name;
                        #>
                        <OleDbDestination Name="Destination - <#= tableName #>" ConnectionName="StagingConn">
                            <!-- 绑定当前输出路径作为输入 -->
                            <InputPath OutputPathName="<#= output.Name #>" />
                            <!-- 关联到Staging库中的同名表 -->
                            <ExternalTableOutput Table="<#= tableName #>" />
                            <!-- 可以根据需要配置列映射，这里用自动映射 -->
                            <Columns>
                                <# foreach (var col in output.OutputColumnCollection) { #>
                                <Column SourceColumn="<#= col.Name #>" TargetColumn="<#= col.Name #>" />
                                <# } #>
                            </Columns>
                        </OleDbDestination>
                        <# 
                            }
                        #>
                    </Transformations>
                </Dataflow>
            </Tasks>
        </Package>
    </Packages>
</Biml>

关键步骤说明： #

1. 获取XML源节点：通过Transformations.OfType<AstXmlSourceNode>().First()找到定义好的XML源组件；
2. 遍历输出路径：用xmlSource.DataflowOutputs遍历所有输出，每个输出的Name对应你的Staging表名；
3. 动态生成Destination：为每个输出路径创建一个OleDbDestination，自动绑定输入路径和目标表，同时自动生成列映射（如果你的XML输出列和表列名称一致的话）。

如果你的XML输出路径名称和Staging表名有差异，只需要在遍历的时候调整tableName的赋值逻辑即可，比如添加一个映射字典来对应名称。

这个方案能完美避免重复编写OleDbDestination的冗余代码，而且后续如果XML源新增输出路径，脚本也能自动适配生成对应的Destination，非常灵活。

内容的提问来源于stack exchange，提问作者Gregor Prohaska