SQL Server 2008导入分号分隔大TXT文件并拆分插入指定表

嘿，针对你每天处理分号分隔txt文件、需要类似PHP explode 拆分插入目标表的需求，我给你几个实用的方案，都是在SSIS或者SQL Server层面能快速落地的：

方案1：SSIS直接处理（最推荐，效率最高） #

既然你已经在使用SSIS，其实完全可以跳过临时表，直接在SSIS里完成拆分和插入——这本来就是ETL工具的本职工作：

• 打开你的SSIS包，找到Flat File Source组件并编辑它
• 在Flat File Connection Manager的「列」选项卡中，把列分隔符设置为;，确认自动识别的列数和你的目标表dbo.showHistoricalLogging完全匹配
• 直接将Flat File Source的输出映射到OLE DB Destination组件（选择目标表dbo.showHistoricalLogging），完成字段映射后运行包即可。

这个方法不用写任何SQL代码，23000行数据SSIS处理起来毫无压力，还能避免中间临时表的开销。

方案2：SQL Server层面拆分（适用于必须用临时表的场景） #

如果因为业务需求必须先把整行字符串导入临时表（比如需要先做数据校验），可以用SQL的字符串拆分函数来实现类似explode的效果：

情况A：SQL Server 2022+/Azure SQL（支持带序号的STRING_SPLIT） #

假设你的临时表#TempData有一个唯一标识字段RowId和存储整行字符串的RawData字段，代码如下：

-- 按目标表的列顺序依次对应拆分后的字段
INSERT INTO dbo.showHistoricalLogging (Col1, Col2, Col3, ...)
SELECT
    MAX(CASE WHEN ordinal = 1 THEN value END) AS Col1,
    MAX(CASE WHEN ordinal = 2 THEN value END) AS Col2,
    MAX(CASE WHEN ordinal = 3 THEN value END) AS Col3,
    -- 继续添加对应目标表所有列的CASE语句
    ...
FROM #TempData
CROSS APPLY STRING_SPLIT(RawData, ';', 1) -- 第三个参数1启用序号排序
GROUP BY #TempData.RowId -- 按临时表的唯一标识分组，确保每行拆分后对应一条目标记录

情况B：旧版本SQL Server（2017及之前，无STRING_SPLIT序号） #

先创建一个带序号的自定义拆分函数：

CREATE FUNCTION dbo.SplitStringWithOrdinal
(
    @InputString NVARCHAR(MAX),
    @Delimiter NVARCHAR(10)
)
RETURNS TABLE 
AS
RETURN 
(
    SELECT 
        value,
        ROW_NUMBER() OVER (ORDER BY (SELECT NULL)) AS ordinal
    FROM STRING_SPLIT(@InputString, @Delimiter)
)

然后用这个函数来拆分插入：

INSERT INTO dbo.showHistoricalLogging (Col1, Col2, Col3, ...)
SELECT
    MAX(CASE WHEN ordinal = 1 THEN value END) AS Col1,
    MAX(CASE WHEN ordinal = 2 THEN value END) AS Col2,
    ...
FROM #TempData
CROSS APPLY dbo.SplitStringWithOrdinal(RawData, ';')
GROUP BY #TempData.RowId

注意事项 #

• 确保拆分后的字段数据类型和目标表列完全匹配，必要时添加CAST/CONVERT转换
• 如果文本中有连续分号（比如空字段），STRING_SPLIT会返回空字符串，要确认目标表列是否允许空值
• 尽量避免用游标循环处理（效率极低），上面的集合操作是SQL Server最优的处理方式

内容的提问来源于stack exchange，提问作者jvbs