使用rsync命令实现xsync广播脚本

2024-08-20 20:20

本文主要是介绍使用rsync命令实现xsync广播脚本,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.rsync

1.1介绍

rsync 是一个非常强大的文件同步工具,它用于在本地计算机之间或通过网络在不同计算机之间高效地复制文件和目录。rsync 支持增量复制,这意味着它只会传输自上次同步以来发生变化的部分数据,从而显著减少网络带宽的使用。
基本语法
rsync 的基本语法如下:

rsync [options] source destination
  • source: 源文件或目录。
  • destination: 目标文件或目录。

常用选项

  • -a, --archive: 归档模式,等同于 -rlptgoD,即递归复制文件、保持符号链接、权限、时间戳、所有权等。
  • -r, --recursive: 递归复制整个目录。
  • -v, --verbose: 显示详细信息。
  • -z, --compress: 对数据进行压缩传输。
  • -P: 等同于 -rp 和 --partial,即递归复制并允许部分传输。
  • -e, --rsh=COMMAND: 指定远程 shell 命令,默认为 ssh。
  • -h, --human-readable: 以人类可读的方式显示文件大小。
  • -u, --update: 只传输那些源文件比目标文件新或者目标文件不存在的文件。
  • -c, --checksum: 使用校验和来检测文件是否改变,而不是依赖于文件大小和最后修改时间。 通过 SSH 复制文件

假设你想从本地计算机复制文件到远程服务器,可以使用以下命令:

rsync -avz -e ssh /path/to/local/file user@remote_host:/path/to/remote/directory/

这里:

  • -avz: 使用归档模式、详细输出和压缩传输。
  • -e ssh: 使用 SSH 协议进行数据传输。
  • /path/to/local/file: 本地文件路径。
  • user@remote_host:/path/to/remote/directory/: 远程服务器上的目标路径。

从远程服务器复制文件
要从远程服务器复制文件到本地计算机,可以使用以下命令:

rsync -avz -e ssh user@remote_host:/path/to/remote/file  /path/to/local/directory/

递归复制整个目录
要递归复制整个目录及其子目录,可以使用 -r 或 -a 选项:

rsync -avz -e ssh /path/to/local/directory/ user@remote_host:/path/to/remote/directory/

注意事项
确保你有足够的权限访问源和目标位置。
在复制大量数据时,考虑使用 -z 选项以减少网络流量。
使用 -v 选项可以帮助你了解 rsync 的执行进度。
如果远程服务器需要密码认证,确保你正确配置了 expect 脚本来处理密码提示。

1.2安装方式

sudo apt update
sudo apt install rsync -y

2.xsync实现

使用 rsync 与 expect 结合实现
expect实现自动输入密码

#!/bin/bash
#判断参数的个数
if [ $# -lt 1 ]
thenecho Not Enough Arhuement!exit;
fi#遍历集群所有机器
for host in hadoop002 hadoop003 hadoop004
doecho ========== ${host} ==========#遍历所有目录,挨个发送for file in $@do#判断文件是否存在if [ -e $file ]then#cd -P cd软连接进入的仍然是目标目录pdir=$(cd -P $(dirname $file); pwd)#获取文件名称fname=$(basename $file)# 标准的开启expect的脚本执行开始
/usr/bin/expect <<EOFset timeout 30spawn ssh root@${host} "mkdir -p $pdir"expect {"yes/no"{send "yes\r";exp_continue}"password:"{send "12345678\r"}}puts "${host}自动登录成功"spawn rsync -av $pdir/$fname root@${host}:$pdirexpect {"yes/no"{send "yes\r"exp_continue}"password:"{send "12345678\r"}}expect eof
EOFelseecho $file does not exists!fidone
done

hadoop002 hadoop003 hadoop004是要广播的远程服务器
$(dirname $file) 获取所在文件的目录
$(basename $file) 获取文件名称

效果图
在这里插入图片描述

注意:

ssh root@${host} "mkdir -p $pdir" 

ssh root@${host} “mkdir -p $pdir”,登录成功后会自动执行mkdir -p p d i r ,最后自动退出远程服务器, s s h r o o t @ pdir,最后自动退出远程服务器,ssh root@ pdir,最后自动退出远程服务器,sshroot@{host} 并不会自动退出而是停留再远程服务端交互界面。
因此使用ssh root@${host} “mkdir -p $pdir” 不用再执行send “exit \r”。

这篇关于使用rsync命令实现xsync广播脚本的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1091091

相关文章

Spring Security简介、使用与最佳实践

《SpringSecurity简介、使用与最佳实践》SpringSecurity是一个能够为基于Spring的企业应用系统提供声明式的安全访问控制解决方案的安全框架,本文给大家介绍SpringSec... 目录一、如何理解 Spring Security?—— 核心思想二、如何在 Java 项目中使用?——

SpringBoot+RustFS 实现文件切片极速上传的实例代码

《SpringBoot+RustFS实现文件切片极速上传的实例代码》本文介绍利用SpringBoot和RustFS构建高性能文件切片上传系统,实现大文件秒传、断点续传和分片上传等功能,具有一定的参考... 目录一、为什么选择 RustFS + SpringBoot?二、环境准备与部署2.1 安装 RustF

Nginx部署HTTP/3的实现步骤

《Nginx部署HTTP/3的实现步骤》本文介绍了在Nginx中部署HTTP/3的详细步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录前提条件第一步:安装必要的依赖库第二步:获取并构建 BoringSSL第三步:获取 Nginx

springboot中使用okhttp3的小结

《springboot中使用okhttp3的小结》OkHttp3是一个JavaHTTP客户端,可以处理各种请求类型,比如GET、POST、PUT等,并且支持高效的HTTP连接池、请求和响应缓存、以及异... 在 Spring Boot 项目中使用 OkHttp3 进行 HTTP 请求是一个高效且流行的方式。

MyBatis Plus实现时间字段自动填充的完整方案

《MyBatisPlus实现时间字段自动填充的完整方案》在日常开发中,我们经常需要记录数据的创建时间和更新时间,传统的做法是在每次插入或更新操作时手动设置这些时间字段,这种方式不仅繁琐,还容易遗漏,... 目录前言解决目标技术栈实现步骤1. 实体类注解配置2. 创建元数据处理器3. 服务层代码优化填充机制详

Python实现Excel批量样式修改器(附完整代码)

《Python实现Excel批量样式修改器(附完整代码)》这篇文章主要为大家详细介绍了如何使用Python实现一个Excel批量样式修改器,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一... 目录前言功能特性核心功能界面特性系统要求安装说明使用指南基本操作流程高级功能技术实现核心技术栈关键函

Java实现字节字符转bcd编码

《Java实现字节字符转bcd编码》BCD是一种将十进制数字编码为二进制的表示方式,常用于数字显示和存储,本文将介绍如何在Java中实现字节字符转BCD码的过程,需要的小伙伴可以了解下... 目录前言BCD码是什么Java实现字节转bcd编码方法补充总结前言BCD码(Binary-Coded Decima

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订

防止Linux rm命令误操作的多场景防护方案与实践

《防止Linuxrm命令误操作的多场景防护方案与实践》在Linux系统中,rm命令是删除文件和目录的高效工具,但一旦误操作,如执行rm-rf/或rm-rf/*,极易导致系统数据灾难,本文针对不同场景... 目录引言理解 rm 命令及误操作风险rm 命令基础常见误操作案例防护方案使用 rm编程 别名及安全删除

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定