如何从动态生成的同结构SQL表中创建新表？

核心思路：利用表结构一致性简化操作 #

因为所有表结构完全相同，无需逐个循环处理，以下是几种比UNION + FOREACH更高效的实现方案：

1. 数据库端直接用动态SQL批量合并（以SQL Server为例） #

如果你的数据库是SQL Server，可通过SELECT ... INTO一次性创建新表并完成数据合并，无需循环：

-- 已知表名时直接拼接
SELECT * INTO NewCombinedTable
FROM (
    SELECT * FROM Table1
    UNION ALL -- 无需去重时用UNION ALL，速度比UNION快；需去重则替换为UNION
    SELECT * FROM Table2
    SELECT * FROM Table3
    -- 继续追加所有目标动态表
) AS CombinedData

若表名是动态生成、无法提前确定，可通过动态SQL自动筛选拼接：

DECLARE @SQL NVARCHAR(MAX) = ''
SELECT @SQL += 'SELECT * FROM ' + QUOTENAME(name) + ' UNION ALL '
FROM sys.tables
WHERE name LIKE 'YourDynamicTablePrefix%' -- 按你的表名规则筛选目标表

-- 移除末尾多余的UNION ALL并拼接创建新表的语句
SET @SQL = LEFT(@SQL, LEN(@SQL) - 10) + ' INTO NewCombinedTable'

EXEC sp_executesql @SQL

2. 基于现有PowerShell工作流：先合并CSV再导入 #

既然你已经用PowerShell实现了CSV导入数据库，可以先在PowerShell层面合并所有同结构的CSV文件，再导入到新表，避免数据库端处理复杂逻辑：

# 批量合并指定文件夹下的同结构CSV
Get-ChildItem -Path "C:\YourCSVStorage" -Filter "DynamicTable_*.csv" | 
    ForEach-Object { Import-Csv $_.FullName } | 
    Export-Csv "C:\Combined_Data.csv" -NoTypeInformation

# 复用你现有的数据库导入脚本，将合并后的CSV导入新表
$connectionString = "YourDBConnectionString"
$bulkCopy = New-Object Data.SqlClient.SqlBulkCopy($connectionString)
$bulkCopy.DestinationTableName = "NewCombinedTable"
# 以下为你现有导入逻辑的复用部分（示例）
$table = New-Object Data.DataTable
$reader = New-Object System.IO.StreamReader("C:\Combined_Data.csv")
$csvReader = New-Object Microsoft.VisualBasic.FileIO.TextFieldParser($reader)
# 后续列映射、数据写入逻辑...

3. 封装存储过程实现复用 #

如果需要频繁执行该操作，可编写存储过程自动筛选符合条件的同结构表并完成合并：

CREATE PROCEDURE CreateCombinedTable
    @NewTableName NVARCHAR(128),
    @TablePrefix NVARCHAR(128)
AS
BEGIN
    SET NOCOUNT ON;
    DECLARE @SQL NVARCHAR(MAX) = ''

    SELECT @SQL += 'SELECT * FROM ' + QUOTENAME(name) + ' UNION ALL '
    FROM sys.tables
    WHERE name LIKE @TablePrefix + '%'

    IF @SQL <> ''
    BEGIN
        SET @SQL = LEFT(@SQL, LEN(@SQL) - 10) + ' INTO ' + QUOTENAME(@NewTableName)
        EXEC sp_executesql @SQL
    END
END

调用时只需执行：

EXEC CreateCombinedTable 'NewCombinedTable', 'DynamicTable_'

方案对比 #

• UNION + FOREACH：仅适合表数量极少的场景，循环会额外增加开销，表数量多时效率低下。
• 动态SQL批量合并：数据库端直接处理，速度最快，适合大量动态表的合并场景。
• PowerShell合并CSV再导入：与现有工作流无缝衔接，无需修改复杂数据库逻辑，适合CSV源仍在本地的情况。

内容的提问来源于stack exchange，提问作者greg duenow