Bash脚本：解决标记文件后无法重复复制至不同目录的问题

嘿，这个问题我之前帮朋友排查过，核心痛点就是你用重命名源文件的方式来标记“已完成”——但要复制到多个目录的话，第一个目标复制完就改了文件名，后面的循环自然找不到原文件了，这就卡壳了！

给你几个实用的解决方案，按可靠性排序：

方案1：用独立标记文件记录每个复制任务（推荐） #

不要修改源文件，而是用单独的标记目录来记录每个文件到每个目标的复制状态。这样就算某个文件要复制到10个目录，每个目标的完成状态都能单独追踪，完全不会互相干扰。

示例脚本：

# 配置你的源目录和目标目录列表
SOURCE_DIR="/path/to/your/source"
TARGET_DIRS=("/path/to/target1" "/path/to/target2" "/path/to/target3")

# 创建存放标记文件的目录（隐藏目录避免干扰）
MARKER_DIR="${SOURCE_DIR}/.copy_markers"
mkdir -p "$MARKER_DIR"

# 遍历每个目标目录，逐个处理复制
for target in "${TARGET_DIRS[@]}"; do
    # 确保目标目录存在
    mkdir -p "$target"
    
    # 遍历源目录里的所有文件（跳过目录和标记目录）
    for file in "${SOURCE_DIR}"/*; do
        [ -f "$file" ] || continue  # 只处理文件，跳过目录
        filename=$(basename "$file")
        
        # 生成唯一的标记文件名：用目标目录的哈希值区分不同目标
        target_hash=$(echo "$target" | md5sum | cut -d' ' -f1)
        marker_file="${MARKER_DIR}/${filename}_${target_hash}"
        
        # 如果标记不存在，就执行复制并创建标记
        if [ ! -f "$marker_file" ]; then
            cp "$file" "$target/"
            touch "$marker_file"
            echo "✅ Copied $filename to $target"
        fi
    done
done

# 最后检查哪些文件还没完成所有目标的复制
echo -e "\n⚠️ Files not fully copied to all targets:"
for file in "${SOURCE_DIR}"/*; do
    [ -f "$file" ] || continue
    filename=$(basename "$file")
    fully_copied=true
    
    # 检查该文件在所有目标的标记是否都存在
    for target in "${TARGET_DIRS[@]}"; do
        target_hash=$(echo "$target" | md5sum | cut -d' ' -f1)
        marker_file="${MARKER_DIR}/${filename}_${target_hash}"
        if [ ! -f "$marker_file" ]; then
            fully_copied=false
            break
        fi
    done
    
    if [ "$fully_copied" = false ]; then
        echo "- $filename"
    fi
done

这个方案的优势：

• 源文件完全不动，不会误删或破坏原始文件
• 支持脚本中断后重新运行，自动接着完成未完成的复制任务
• 每个目标的复制状态独立，完美解决多目标复制的标记冲突

方案2：先完成所有复制，最后统一标记源文件 #

如果你的场景必须标记源文件（比如要区分已处理和未处理的原始文件），可以先把所有复制任务执行完，再统一给源文件加下划线标记。

示例脚本：

SOURCE_DIR="/path/to/your/source"
TARGET_DIRS=("/path/to/target1" "/path/to/target2" "/path/to/target3")

# 先遍历所有目标，完成全部复制（只复制未标记的文件）
for target in "${TARGET_DIRS[@]}"; do
    mkdir -p "$target"
    # 匹配所有不以下划线开头的文件，复制到目标目录
    cp "${SOURCE_DIR}/"[^_]* "$target/" 2>/dev/null  # 忽略“无匹配”的错误
done

# 统一给已完成所有复制的文件加下划线前缀
for file in "${SOURCE_DIR}/"[^_]*; do
    [ -f "$file" ] || continue
    mv "$file" "${SOURCE_DIR}/_$(basename "$file")"
done

# 检查是否有未完成的文件（理论上如果复制都成功的话，这里会是空的）
echo -e "\n⚠️ Files not copied to all targets:"
ls -1 "${SOURCE_DIR}/"[^_]* 2>/dev/null || echo "None"

注意：这个方案的缺点是如果脚本中途中断，可能会有文件只复制了部分目标就被标记，所以只适合能保证一次运行完成的简单场景。

方案3：用日志文件记录复制状态 #

和方案1类似，只是把标记文件换成日志记录。每次复制成功就写入日志，然后通过日志来检查哪些文件还没完成所有目标的复制。这个方案适合需要保留复制历史的场景。

总结一下，优先选方案1，它是最稳定、最灵活的，能应对各种复杂情况。

内容的提问来源于stack exchange，提问作者obidyne