如何按CSV首列前5字符拆分大文件并生成对应命名的TXT文件
原尝试方案的问题说明
管道拼接split方案的核心缺陷
- split命令本身不支持自定义输出文件名规则,默认生成xaa、xab这类临时命名的分片文件,天生无法匹配“用第一列前5字符命名”的需求
- 拆分逻辑错误:
split -l 12按固定12行切分输出内容,既没有和源文件每行一一对应生成独立文件的逻辑,参数设置也不符合实际文件长度,最终只能得到2个分片,完全达不到拆分出8个独立文件的效果
自定义awk脚本的现存问题
- 冗余写入:脚本中多写了一行
print "Remarks" >f,会在每个目标文件内增加一行无关内容,不符合文件仅包含Name、Date两行的要求 - 语法不规范:把文件变量
f = substr($1,1,5)".txt"单独写在处理块外部,没有纳入动作块的统一逻辑,不同awk实现对这类无块独立语句的解析规则不统一,容易出现变量赋值时机错位的兼容问题
可直接运行的实现脚本
无需拼接额外命令,直接在awk逻辑内完成逐行读入、文件名计算、内容写入即可:
awk -F'|' '{ # 按规则生成目标文件路径 output_file = substr($1, 1, 5) ".txt" # 按格式写入两行固定内容 print "Name: " substr($1, 1, 5) > output_file print "Date: " $2 > output_file # 主动关闭文件句柄,避免批量处理时的文件描述符占用问题 close(output_file) }' record.csv
执行效果说明
脚本运行后会在当前工作目录生成全部8个目标txt文件,单个文件内容和示例完全一致,例如AAAAA.txt的内容为:
Name: AAAAA Date: 2020-12-28
内容的提问来源于stack exchange,提问作者Noktang
相关产品推荐
相关产品推荐

