小白到运维工程师自学之路 第五十三集 (rsync+inotify备份)

一、概述

Rsync是一个用于在不同计算机之间同步文件和文件夹的工具。它可以在本地计算机和远程服务器之间复制、更新和备份文件。rsync通过比较源和目标文件的差异来最小化传输的数据量,从而提供高效的文件同步功能。

Inotify是Linux内核提供的一种机制,用于监视文件系统事件。通过使用inotify,应用程序可以监视文件或目录的变化,如创建、修改、删除、移动等操作。当文件发生变化时,内核会向应用程序发送通知,应用程序可以根据需要采取相应的操作。

结合使用rsync和inotify,可以实现实时文件同步。当文件发生变化时,inotify会触发通知,然后可以使用rsync来自动同步修改后的文件到指定的目标位置,以保持文件的实时同步和备份。这样可以方便地将文件从一个位置快速同步到另一个位置,而无需手动复制和粘贴文件。

二、工作原理

1、应用程序首先使用inotify监视源文件或目录的变化。这可以通过向inotify API注册一个监视器来实现。

2、当源文件或目录发生变化时,内核会生成相应的inotify事件,并将其发送给应用程序。

3、应用程序接收到inotify事件后,可以根据需要执行相应的操作。在这种情况下,应用程序会启动rsync命令来进行文件同步。

4、rsync根据在源和目标文件之间的差异计算出需要进行传输的数据量,并使用增量传输的方式将修改的文件复制到目标位置。

5、一旦rsync完成文件传输,源文件和目标文件将保持同步,以反映最新的变化。

6、应用程序继续监听inotify事件,等待再次触发,以进行后续的文件同步操作。

三、准备工作

1、两台服务器

2、关闭防火墙

3、两台服务器可以通联

四、rsync常用选项

-a归档模式包含-rlptoD
-v显示详细信息
-z传输进行压缩
-p保留权限
-g保留组标识
-o保留用户标识
--delete:同步数据删除目标源文件数据
--checksum:校验同步数据

五、安装部署rsync

1、服务端安装rsync

yum -y install rsync

vim /etc/rsyncd.conf                   配置文件
uid = nobody                           管理账户
gid = nobody                           管理组
use chroot = yes                       是否禁锢在家目录
address = 192.168.77.111               rsync监听的ip地址
port 873                               端口号
log file = /var/log/rsyncd.log         日志文件存放路径
pid file = /var/run/rsyncd.pid         服务的pid号
hosts allow = 192.168.77.0/24          可以访问的用户
[wwwroot]                              模块名称
path=/var/www/html                     客户端同步的目录
comment = wwwroot                      同步目录数据说明
read only = no                         是否允许只读
dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2  同步的时候哪些后缀不需要压缩
auth users = syh                       同步的用户
secrets file = /etc/rsyncd_users.db    存放同步用户的文件

vim /etc/rsyncd_users.db    在同步用户的文件中写入用户和密码
syh:123456

 

chmod 600 /etc/rsyncd_users.db    赋予共享用户文件600权限
rsync --daemon                    更新rsync
mkdir -p /var/www/html            创建共享目录
systemctl start rsyncd             启动rsync
netstat -anputl | grep rsync      查看端口是否启动

 

touch /var/www/html/test.txt                   在共享目录中创建测试文件

2、客户端同步

export RSYNC_PASSWORD=123456                                更新全局变量
mkdir html                                                  创建共享目录
rsync -avz --delete syh@192.168.77.111::wwwroot /root/html  启动同步

查看是否同步成功

 六、服务器安装部署inotify

使用源码安装:inotify的依赖是gcc

inotify监控类型
create:创建目录或者文件触发同步
move:  移动或者重命名触发同步
delete:删除数据触发同步
modify:修改数据触发同步
attrib:修改文件目录属性触发同步

 由于inotify实时同步是基于ssh实现的所以要配置ssh免密登录

ssh-keygen                                生成密钥
ssh-copy-id  root@192.168.77.112          将密钥上传给客户端

测试免密登录

编写实时同步脚本
#!/bin/bash
INW="inotifywait -rmq -e MOVE,DELETE,CREATE,ATTRIB /var/www/html"
RSY="rsync -azH --delete /var/www/html/ root@192.168.77.112:/root/html"
$INW | while read DIRECTORY EVENT FILE
do
        $RSY
done

第二行表示定义一个变量/var/www/html/发生增加、删除、创建、更新权限
第二行表示定义一个变量表示上传的主机
第三行调用INW变量,并使用while循环当发生INW变量中的情况时将每一行的内容分别存储到DIRECTORY、EVENT和FILE这三个变量中
第四行循环的内容是变量RSY中发生的事件

 使用sh (脚本名称) & 把脚本放到后台运行

七、测试

在服务器上的共享目录下创建一个测试文件

到客户端的共享目录查看

再整多点测试文件看看服务是否给力

到客户端查看(啪一下 很快啊)

 

以上就是rsync+inotify实时同步文件的操作

如有错误欢迎各位大佬批评指正,我们共同进步

 

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/37507.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

web中引入live2d的moc3模型

文章目录 前言下载官方sdk文件使用ide编译项目(vsCode)项目初始化使用vsCode项目树介绍使用live server运行index页面 演示导入自己的模型并显示modelDir文件resources文件夾案例模型修改modelDir然後重新打包項目運行 前言 先跟着官方sdk调试一遍&…

【状态估计】基于卡尔曼滤波器和扩展卡尔曼滤波器用于 INS/GNSS 导航、目标跟踪和地形参考导航研究(Matlab代码实现)

💥💥💞💞欢迎来到本博客❤️❤️💥💥 🏆博主优势:🌞🌞🌞博客内容尽量做到思维缜密,逻辑清晰,为了方便读者。 ⛳️座右铭&a…

Windows VScode如何配置与使用git?

当我们在VScode中编写代码后,需要提交到git仓库时,但是我们又不想切换到git的命令行窗口,我们可以在VScode中配置git,然后就可以很方便快捷的把代码提交到仓库中。 1. 官网下载安装Git命令行工具 根据自己的电脑系统&#xff0c…

尚硅谷Docker实战教程-笔记12【高级篇,Docker-compose容器编排】

尚硅谷大数据技术-教程-学习路线-笔记汇总表【课程资料下载】视频地址:尚硅谷Docker实战教程(docker教程天花板)_哔哩哔哩_bilibili 尚硅谷Docker实战教程-笔记01【基础篇,Docker理念简介、官网介绍、平台入门图解、平台架构图解】…

3.2.17 什么是数组及应用

【分享成果,随喜正能量】人这一生,好不好都得自己走,累不累都得自己承受。每个人都有难言之苦,每个人都有无声的泪,岁月可曾放过谁?再风光的人,背后都有寒凉凄楚,再幸福的人&#xf…

[每周一更]-(第54期):Go的多版本管理工具

参考 https://zhuanlan.zhihu.com/p/611253641https://learnku.com/articles/78326 前文概要 Go语言从开始使用从1.13起步,随着泛型的支持,带领团队在转型Go的时候,做基础组件架构选型使用1.18,但是Go版本不断迭代想使用最新版本…

C++类相关概念

1. 函数形参默认值 (1) 建议函数(不仅仅是构造函数)形参默认值只在函数声明中指定; (函数声明和定义写在同一个文件中,则函数声明、定义两者之一或两者都可指定形参默认值,两者都指…

中国移动光猫设置桥接

网上教程五花八门,有些坑有些行,我试成功了,记录一下方法。 一、流程简述 1. 使用超级管理员账号登录中国移动光猫,设置桥接,并重启 2. 用网线连接路由器和光猫,登录路由器,设置宽带拨号&…

数据分析——AB测试应用与实战

摘要 某电商公司非常注重自己的落地页设计,希望通过改进设计来提高转化率。以往该公司全年转化率平均在13%左右,现在希望设计的新页面能够带来更高的转化率,希望新页面的转化率能有2%的提升,达到15%。在正式推出新页面之前&#…

【Distributed】分布式ELK日志文件分析系统(二)

文章目录 一、FilebeatELK 部署1. 环境部署2. 在 Filebeat 节点上操作2.1 安装 Filebeat2.2 设置 filebeat 的主配置文件 3. 在 Apache 节点上操作3.1 在 Logstash 组件所在节点上新建一个 Logstash 配置文件 3. 启动3.1 在Logstash 组件所在节点启动3.2 在 Filebeat 节点 启动…

Python调用ImageMagick生成PDF文件缩略图

使用Python调用ImageMagick生成PDF文件缩略图 Imagemagick使用Ghostscript作为其依赖项之一,以便能够处理和转换PDF相关的图像。 准备 安装Ghostscript,网站安装ImageMagick,网站 安装完毕后,需要自行配置环境路径 脚本 使用示…

【USRP X310】如何将你的X310转化为USRP RIO 可以用于FPGA编程

X310 转化为USRP RIO X310产品X310和NI-USRP对应关系 简介第一步原理解释打开工具运行 Initialize Flash.vi可以去选择设备类型Hardware Current Version 如何选择 第二步创建工程运行校准程序 附录:射频子板的IDWBXSBXCBXUBXTwinRX X310产品 X310和NI-USRP对应关系…

jvm新生代调优

5-4 新生代调优 只有排除了自己代码的问题后,再进行内存调优,内存调优都是从新生代开始,因为新生代优化空间更大一些 新生代的特点 所有的new操作分配内存都是非常廉价的,非常快 TLAB:thread-local allocation buf…

Redis——基础篇(包含redis在云服务上的docker化安装和连接以及常用命令)

初识Redis Redis为键值型数据库,数据以键值形式存储。没有表,没有约束。 认识NoSQL mysql就是典型的关系型数据库(SQL)。 目的都是数据的增删改查,但数据存储方式不一样。 关系型和非关系型在结构上有差异 关系型的结构一般定好后就很少修…

【JAVAEE】JVM中垃圾回收机制 GC

博主简介:想进大厂的打工人博主主页:xyk:所属专栏: JavaEE初阶 上篇文章我们讲了java运行时内存的各个区域。 传送门:【JavaEE】JVM的组成及类加载过程_xyk:的博客-CSDN博客 对于程序计数器、虚拟机栈、本地方法栈这三部分区域而言&#x…

动态规划01背包之1049 最后一块石头的重量 II(第9道)

题目: 有一堆石头,用整数数组 stones 表示。其中 stones[i] 表示第 i 块石头的重量。 每一回合,从中选出任意两块石头,然后将它们一起粉碎。假设石头的重量分别为 x 和 y,且 。那么粉碎的可能结果如下: …

微信小程序(二)

目录 1、input标签 一、表单绑定 1、数据绑定 2、输入获取 二、网络请求 1、介绍 2、注意 3、使用 4、基于Promise封装 三、自定义组件 1、创建 2、父向子组件通信 3、子向父组件通信 4、生命周期 四、vant weapp组件库 1、配置 2、使用 进入本章前的拓展&#…

Git❀详细使用教程

Git❀详细使用教程 一、Git简介1.1 什么是Git?1.2 Git的特点1.3 集中式与分布式的区别?1.4 Git工作流程图 二、Git安装与常用命令2.1 Git环境配置2.1.1 下载与安装2.1.2 基本配置2.1.3 为常用指令设置别名(可选)2.1.4 解决GitBash…

jsonschema networknt json-schema-validator 高级能力json 数字很大时, 变成什么类型

入参校验产品化 schema_个人渣记录仅为自己搜索用的博客-CSDN博客 自动变成了bigInteger类型. 哪怕你的jsonSchema 配置的是integer , 不冲突.

AlGaN基深紫外FP激光器仿真模型及材料信息数据库有何用途?

波长范围为UVC波段(100-280 nm)的深紫外FP(Fabry-Pero,法布里和珀罗是两位法国的科学家)激光器可广泛应用于数据通信、光通信、3D打印、材料加工、显示与照明、激光雷达、人脸/手势识别、医疗和表面监测等领域。FP激光…