如何从CSV中匹配'302'起始行加载数据,避免带入前半部分表头
解决方案
问题原因
你当前代码的问题主要有两点:
- 默认将跳过前3行后的第一行(也就是第一组数据集的表头)识别为了全局表头,导致列名都是第一组的字段
WHERE c1 = '302'仅筛选出了第二组的起始行本身,不会带出该行之后的所有内容
修正方案
核心逻辑
- 第一步先读取跳3行后的所有内容,不指定表头,所有列按默认序号命名,同时给每一行添加自增行号
- 第二步定位到首列值为
302的行号作为起始位置 - 第三步筛选出所有行号大于等于起始行号的内容,再将该段内容的第一行设置为新表头即可
修正后代码
USE csvImpersonation FILE 'c:\\myfile.TXT' SKIP_AT_START 3 HEADER false // 强制不识别表头,避免第一组表头被设为全局列名 RETURN @rawdata // 给所有行添加自增行号,从1开始计数 @data_with_row = SELECT *, ROW_NUMBER() OVER () AS row_num FROM @rawdata; // 定位第二组数据集的起始行号 @start_row = SELECT MIN(row_num) AS start_row_num FROM @data_with_row WHERE c1 == '302'; // 提取从起始行开始的所有内容 @target_raw = SELECT c1, c2, c3, c4 // 可根据实际列数调整 FROM @data_with_row CROSS JOIN @start_row WHERE row_num >= start_row_num; // 后续处理:将@target_raw的第一行设为表头,跳过1行读取后续行即为第二组数据集
额外注意
你原代码里读取数据集时写的FROM @mylife和前面定义的返回变量@myfile不一致,属于笔误,修正后要保持变量名统一。
内容的提问来源于stack exchange,提问作者st87_top
相关产品推荐
相关产品推荐

