Bash CSV分割脚本疑问：分割未完成时文件已被移动是否正常？

先明确一个核心点：默认情况下，split是同步阻塞的命令——它会把整个输入CSV文件处理完，所有分割后的小文件都写入磁盘之后，才会退出并让Shell执行后续的for j in x*循环。所以理论上，你不应该看到“第一个文件分割未完成就移动”的情况。

那为什么你会观察到这个现象？大概率是这两个原因之一：

• 视觉误解：split处理大文件时，会边处理边生成分割文件（比如先写满xaa，再创建xab继续写入）。如果你在脚本运行过程中手动查看目录，会看到这些x*文件陆续出现，但此时split还在运行，移动逻辑根本没触发。只有当split彻底处理完当前CSV文件，所有分割文件都生成完毕后，才会执行后面的移动循环。
• 脚本的致命冲突问题：你的原始脚本有个严重缺陷——多个CSV文件分割时，split默认生成的xaa/xab等文件名会互相覆盖！比如第一个文件01-xx.csv刚分割出xaa，处理第二个文件02-xx.csv时，split会直接覆盖已有的xaa，这会导致数据丢失，也可能让你误以为是“第一个文件还没分割完就被移动”，但实际上是第二个文件的split覆盖了第一个的分割结果。

修正后的脚本 #

解决问题的核心是给每个CSV文件的分割结果指定唯一前缀，避免文件名冲突，同时确保移动逻辑只处理当前CSV对应的分割文件：

# 先确保目标目录存在，避免移动时报错
mkdir -p chunked

for i in *.csv; do
  # 给split指定专属前缀：用原文件名去掉.csv后缀，比如01-letters-letters-
  split -l 600000 "$i" "${i%.csv}-"
  # 只移动当前CSV对应的分割文件，而非所有x*
  for j in "${i%.csv}-"*; do
    mv "$j" "chunked/${j}"
  done
done

额外说明 #

• ${i%.csv}是Shell参数扩展语法，用来去掉文件名的.csv后缀，生成唯一的分割前缀，这样每个CSV的分割文件会是01-letters-letters-xaa、01-letters-letters-xab这种格式，完全不会和其他文件的分割结果冲突。
• 这个修正后的脚本会严格保证：处理完一个CSV的所有分割操作后，再移动它的所有分割文件，绝对不会出现“分割未完成就移动”的情况。

内容的提问来源于stack exchange，提问作者haodong tao