如何通过第三台服务器用SCP在两远程服务器传文件时排除指定文件
解决方案
原生scp工具本身不内置排除文件/目录的配置参数,你要求的过滤规则无法直接通过scp自带参数实现。可以使用「ssh+tar管道组合」的方式实现和scp -3完全等价的中转传输效果,同时满足过滤要求,全程走当前终端服务器中转,不需要两台远程服务器直接互通,也不需要额外安装工具。
方案1:ssh+tar管道实现(推荐,效率最高)
ssh -o StrictHostKeyChecking=no $srcHostname "cd $srcPath && tar -cf - --exclude='dir1/dir1_1' --exclude='*/file1' ." | ssh -o StrictHostKeyChecking=no $tgtHostname "cd $tgtPath && tar -xf -"
参数说明:
- 第一段ssh连接源主机,进入指定源路径后执行打包操作:
--exclude='dir1/dir1_1'精确排除$srcPath/dir1/dir1_1目录下的所有内容,如果你要排除所有层级下名为dir1_1的目录,可简化为--exclude='dir1_1'--exclude='*/file1'排除所有层级下名为file1的文件-cf -将打包后的内容输出到标准输出流
- 管道将打包流直接传输到第二段ssh进程,连接目标主机进入指定目标路径后直接解压,全程文件不需要落地到当前终端服务器,和
scp -3的中转逻辑完全一致,传输效率和原生scp基本持平。
方案2:强制使用scp的兼容方案
如果必须保留scp调用形式,可先从源端获取过滤后的文件列表,再循环调用scp传输,仅适合小文件量场景:
# 1. 从源主机获取符合要求的文件相对路径列表 file_list=$(ssh -o StrictHostKeyChecking=no $srcHostname "find $srcPath -type f ! -path '*/dir1/dir1_1/*' ! -name 'file1' | sed "s|^$srcPath/||"") # 2. 循环调用scp逐个传输文件 for file in $file_list; do scp -o StrictHostKeyChecking=no -3 $srcHostname:$srcPath/$file $tgtHostname:$tgtPath/$file done
该方案的缺点是每个文件都会单独建立ssh连接,大文件量下传输效率远低于方案1。
内容的提问来源于stack exchange,提问作者Febin
相关产品推荐
相关产品推荐

