MySQL使用LOAD DATA INFILE导入CSV时能否忽略页脚行？

MySQL原生LOAD DATA INFILE没有专门指定数据结束标记跳过页脚的内置参数，但可以通过以下三种方案实现需求： #

方案1：内置WHERE子句过滤（最通用，无需预处理文件） #

LOAD DATA INFILE支持在语句末尾增加WHERE条件过滤行，所有不匹配条件的行都会被自动跳过，不会插入到表中。
针对你的场景，页脚行的col1列会匹配Count:%规则，修改导入语句如下：

load data infile '/data/data.csv'
into table Staging
fields terminated by ',' enclosed by ''
lines terminated by '\r\n'
ignore 1 LINES
(@dummy, col1, col2, col3)
set col0ID=null
WHERE col1 NOT LIKE 'Count:%' AND col1 IS NOT NULL;

说明：语句中@dummy是用户变量，用来接收行开头多余的空字段，你可以根据实际的字段匹配规则调整WHERE后的过滤条件，灵活度最高。 #

方案2：预处理CSV文件截断页脚（适合大文件场景） #

如果导入的文件体积很大，提前在系统层过滤掉页脚行可以提升导入效率，不需要在MySQL层做判断。
Linux环境下的预处理命令示例：

# 定位到第一个,,,,Count:开头的行，导出该行之前的所有内容到新文件
grep -n ",,,,Count:" /data/data.csv | head -n1 | cut -d: -f1 | xargs -I {} head -n $(({} - 1)) /data/data.csv > /data/data_clean.csv

之后直接导入预处理后的data_clean.csv即可，不需要修改原有导入逻辑。 #

方案3：固定页脚行数用LIMIT参数（适合MySQL 8.0.19+版本） #

如果你每次导入的文件页脚行数固定，且使用MySQL 8.0.19及以上版本，可以直接用LOAD DATA INFILE新增的LIMIT参数限制导入行数，自动跳过末尾的页脚行。
示例：假设文件总共有1行表头 + 1000行有效数据 + 2行页脚，导入语句如下：

load data infile '/data/data.csv'
into table Staging
fields terminated by ',' enclosed by ''
lines terminated by '\r\n'
ignore 1 LINES
(col1,col2,col3)
set col0ID=null
LIMIT 1000;

内容的提问来源于stack exchange，提问作者anon_dcs3spp