服务器备份 & cp复制 & rsync复制 shell



https://abc.htmltoo.com/thread-46256.htm


vim  /opt/file.sh

#!/bin/bash
set -o nounset
#set -o errexit
#set -eo pipefail

#你要修改的地方从这里开始
#获取外网ip
intranet_ip="121.36.223.2"

#rm -rf /data/backup/file/$intranet_ip/*;

#文件夹不存在则创建
if [ ! -d "/data/backup/file/$intranet_ip" ];then
  mkdir -p /data/backup/file/$intranet_ip/{root,data,system,docker};
fi

#system
#cp -a: 会保留原有数据的时间戳等信息
#cp -r: 使用新的时间戳等信息
#cp -f: 没有强制覆盖提醒
-a   :相当于 -pdr 的意思;
-d   :若来源文件为连结文件的属性(link file),则复制连结文件属性而非档案本身;
-f   :为强制 (force) 的意思,若有重复或其它疑问时,不会询问使用者,而强制复制;
-i   :若目的檔(destination)已经存在时,在覆盖时会先询问是否真的动作!
-l   :进行硬式连结 (hard link) 的连结档建立,而非复制档案本身;
-p   :连同档案的属性一起复制过去,而非使用预设属性;
-r   :递归持续复制,用于目录的复制行为;
-s   :复制成为符号连结文件 (symbolic link),亦即『快捷方式』档案;
-u   :若 destination 比 source 旧才更新 destination !
cp -af  /root/  /data/backup/file/$intranet_ip/root/
cp -af  /usr/lib/systemd/   /data/backup/file/$intranet_ip/
cp -af  /etc/hosts  /data/backup/file/$intranet_ip/system/
cp -af  /etc/crontab  /data/backup/file/$intranet_ip/system/
cp -af  /var/spool/cron/root  /data/backup/file/$intranet_ip/system/cron
cp -af  /etc/rc.d/   /data/backup/file/$intranet_ip/system/
cp -af  /etc/supervisord.d/   /data/backup/file/$intranet_ip/system/
#cp强制覆盖
\cp -r 
/bin/cp -r 
#不覆盖拷贝方法
-可能希望跳过某些已经在目标文件夹中已存在的文件。此时可通过添加-n解决。
cp -rn 

#app
cp -af  /opt/  /data/backup/file/$intranet_ip/data/
cp -af  /data/scripts/  /data/backup/file/$intranet_ip/data/
cp -af  /etc/haproxy/haproxy.cfg   /data/backup/file/$intranet_ip/data/
cp -af  /etc/redis/6379.conf  /data/backup/file/$intranet_ip/data/
cp -af  /usr/local/webserver/   /data/backup/file/$intranet_ip/data/
cp -af  /data/mysql/3306/my.cnf   /data/backup/file/$intranet_ip/data/3306-my.cnf
cp -af  /etc/my.cnf  /data/backup/file/$intranet_ip/data/

#docker
docker save aca9e3248970 > /data/backup/file/$intranet_ip/docker/php70.tar  
docker save 99beabf58bc2 > /data/backup/file/$intranet_ip/docker/pdf-app.tar  

sleep 20;  #等20秒后执行下一条

#web
#把.git目录过滤掉,rv隐藏目录, 想排除两个或者多个目录,用--exclude
#rsync -avz --exclude=.git /data/web /data/backup/file/$intranet_ip/data/
#rsync -avz --exclude=/data/elk/logs  --exclude=/data/elk/elasticsearch-6.2.3/logs /data/elk  /data/backup/file/$intranet_ip/data/
#无差异拉取,删除多,以远端源为准,用--delete;  远程端口用: -e 'ssh -p 55555';
#rsync -avz --delete -e 'ssh -p 55555' --exclude=.git /data/web root@172.16.8.100:/data/backup/server/$intranet_ip/;
#rsync -avz --delete -e 'ssh -p 55555' --exclude=/data/elk/logs  --exclude=/data/elk/elasticsearch-6.2.3/logs /data/elk  root@172.16.8.100:/data/backup/file/$intranet_ip/;

rsync -avz --delete -e 'ssh -p 55555' --exclude=.git /data/backup/file/$intranet_ip/* root@172.16.8.100:/data/backup/server/$intranet_ip/server/;
rsync -avz --delete -e 'ssh -p 55555' /data0/backups/mysql_backup/$(date +%Y)/$(date +%m)/$(date +%d)/* root@172.16.8.100:/data/backup/server/$intranet_ip/$(date +%Y%m%d);
rsync -avz --delete -e 'ssh -p 55555' --exclude=.git /data/web/* root@172.16.8.100:/data/backup/server/$intranet_ip/web/;


yum install -y rsync; 

chmod -R 777 /opt/file.sh;


# crontab -e ; /var/spool/cron/root

https://abc.htmltoo.com/thread-381.htm

* 01 15,28 * * /bin/sh  /opt/file.sh


# SSH互信免密码登陆

https://abc.htmltoo.com/thread-46001.htm

# ssh -p '55555' 'root@172.16.8.100'

ssh-copy-id -i .ssh/id_rsa.pub root@172.16.8.100 -p 55555

ssh-copy-id -i .ssh/id_rsa.pub root@119.3.157.97 -p 55555


# file: crontab -e ; /var/spool/cron/root

#!/bin/sh
find /data/backup/server/archive/ -mtime +30 -name "*.*" -exec rm -rf {} \;
cd  /data/backup/server;
mkdir -p /data/backup/server/archive/121.36.245.239.$(date +%Y%m%d);
cp  -af   121.36.245.239/*  archive/121.36.245.239.$(date +%Y%m%d);

* 01 05 * * /bin/sh  /opt/file.sh;


# 解压

tar -jxvf examples.tar.bz2 (解压至当前执行目录下)

tar -jxvf examples.tar.bz2  -C /path (/path 解压至其它路径)


#rsync 参数说明

-v:显示rsync过程中详细信息。可以使用"-vvvv"获取更详细信息。
-P:显示文件传输的进度信息。(实际上"-P"="--partial --progress",其中的"--progress"才是显示进度信息的)。
-n --dry-run  :仅测试传输,而不实际传输。常和"-vvvv"配合使用来查看rsync是如何工作的。
-a --archive  :归档模式,表示递归传输并保持文件属性。等同于"-rtopgDl"。
-r --recursive:递归到目录中去。
-t --times:保持mtime属性。强烈建议任何时候都加上"-t",否则目标文件mtime会设置为系统时间,导致下次更新
          :检查出mtime不同从而导致增量传输无效。
-o --owner:保持owner属性(属主)。
-g --group:保持group属性(属组)。
-p --perms:保持perms属性(权限,不包括特殊权限)。
-D        :是"--device --specials"选项的组合,即也拷贝设备文件和特殊文件。
-l --links:如果文件是软链接文件,则拷贝软链接本身而非软链接所指向的对象。
-z        :传输时进行压缩提高效率。
-R --relative:使用相对路径。意味着将命令行中指定的全路径而非路径最尾部的文件名发送给服务端,包括它们的属性。用法见下文示例。
--size-only :默认算法是检查文件大小和mtime不同的文件,使用此选项将只检查文件大小。
-u --update :仅在源mtime比目标已存在文件的mtime新时才拷贝。注意,该选项是接收端判断的,不会影响删除行为。
-d --dirs   :以不递归的方式拷贝目录本身。默认递归时,如果源为"dir1/file1",则不会拷贝dir1目录,使用该选项将拷贝dir1但不拷贝file1。
--max-size  :限制rsync传输的最大文件大小。可以使用单位后缀,还可以是一个小数值(例如:"--max-size=1.5m")
--min-size  :限制rsync传输的最小文件大小。这可以用于禁止传输小文件或那些垃圾文件。
--exclude   :指定排除规则来排除不需要传输的文件。
--delete    :以SRC为主,对DEST进行同步。多则删之,少则补之。注意"--delete"是在接收端执行的,所以它是在
            :exclude/include规则生效之后才执行的。
-b --backup :对目标上已存在的文件做一个备份,备份的文件名后默认使用"~"做后缀。
--backup-dir:指定备份文件的保存路径。不指定时默认和待备份文件保存在同一目录下。
-e          :指定所要使用的远程shell程序,默认为ssh。
--port      :连接daemon时使用的端口号,默认为873端口。
--password-file:daemon模式时的密码文件,可以从中读取密码实现非交互式。注意,这不是远程shell认证的密码,而是rsync模块认证的密码。
-W --whole-file:rsync将不再使用增量传输,而是全量传输。在网络带宽高于磁盘带宽时,该选项比增量传输更高效。
--existing  :要求只更新目标端已存在的文件,目标端还不存在的文件不传输。注意,使用相对路径时如果上层目录不存在也不会传输。
--ignore-existing:要求只更新目标端不存在的文件。和"--existing"结合使用有特殊功能,见下文示例。
--remove-source-files:要求删除源端已经成功传输的文件。


#rsync服务命令

systemctl restart rsyncd.service
systemctl status rsyncd.service
systemctl enable rsyncd.service
systemctl start rsyncd.service
systemctl stop rsyncd.service

#关闭所有进程
killall rsync
#检查是否已经成功启动
ps -ef | grep rsync

---配置文件
/etc/rsyncd.conf


签名:这个人很懒,什么也没有留下!
最新回复 (0)
返回