Unix中拆分大文件后如何移除原文件已提取内容并继续拆分？

问题分析 #

你用split -b 1g input.txt segment生成了第一个1GB分段，但该命令不会修改原文件，且若继续执行会生成所有分段（远超剩余30GB空间），导致无法提取第二个1GB文件。以下是针对性解决方法：

已生成第一个分段后的操作 #

1. 重命名首个分段为目标文件名：

   mv segmentaa first1gb.txt
   

2. 提取第二个1GB分段（直接跳过前1GB内容，避免重复读取整个文件）：

   # 用1GB块大小跳过首段，读取1块
   dd if=input.txt of=second1gb.txt bs=1G skip=1 count=1
   # 若系统不支持1GB块大小，改用1MB块：
   dd if=input.txt of=second1gb.txt bs=1M skip=1024 count=1024
   

空间优化（释放原文件已提取部分的磁盘占用） #

若需释放原文件前2GB的空间（不可逆操作，谨慎执行），可利用稀疏文件特性：

# 将input.txt前2GB标记为空洞，释放对应磁盘空间
fallocate -c -o 0 -l $((2*1024*1024*1024)) input.txt

注：该命令仅支持ext4、XFS等支持稀疏文件的文件系统，执行后原文件逻辑大小仍为230GB，但实际磁盘占用减少2GB。

从头开始的标准流程（避免split的冗余问题） #

如果还未执行split，可直接用dd分两步提取：

1. 提取前1GB：

   dd if=input.txt of=first1gb.txt bs=1G count=1
   

2. 提取第二个1GB：

   dd if=input.txt of=second1gb.txt bs=1G skip=1 count=1
   

3. （可选）释放原文件前2GB空间，命令同上。

注意事项 #

• 执行任何修改原文件的操作前，务必确认数据已备份，避免不可逆损失。
• 若dd命令执行缓慢，可适当调整bs参数（如bs=64M）平衡速度与内存占用。

内容的提问来源于stack exchange，提问作者K Soumya