运维SRE-11 备份服务及备份项目

news2024/11/16 8:44:02

1.第一个服务-rsync备份服务-守护进程模式

1.1概述

  • 守护进程:持续运行的进程,也可以叫作服务
  • 服务一般分为:服务端与客户端
  • 服务端:linux服务器上运行的各种服务软件
  • 客户端:linux中的客户端可能是一个命令,也可能是app,小程序等

1.2流程与原理

在这里插入图片描述
在这里插入图片描述

1.3 rsync守护进程模式快速实战指南

服务端:

客户端:

1)rsync服务端(backup)
a)rsync服务端配置文件

cat /etc/rsyncd.conf 
##################################
#rsyncd.conf start##
#rsyncd 20221111
fake super = yes
uid = rsync
gid = rsync
use chroot = no
max connections = 200
timeout = 300
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
ignore errors
read only = false
list = false
#hosts allow = 172.16.1.0/24
#hosts deny = 0.0.0.0/32
auth users = rsync_backup
secrets file = /etc/rsync.password
[data]
comment = "backup dir by oldboy lidao996"
path = /data

b)创建用户(添加与登录shell无关的用户)

useradd -s /sbin/nologin -M rsync
[root@backup /etc]# id rsync
uid=1000(rsync) gid=1000(rsync) 组=1000(rsync)

c)创建密码文件

1.创建密码文件
echo 'rsync_backup:1' > /etc/rsync.password
2.修改权限
chmod 600 /etc/rsync.password

d)创建共享目录

mkdir -p /data
chown rsync.rsync /data/

e)重启服务

1.检查rsyncd服务状态
systemctl status rsyncd
2.启动rsyncd服务
systemctl restart rsyncd
3.再次检查状态
systemctl status rsyncd
4. 开机自启动
systemctl enable rsyncd
5. 检查进程,端口
ps -ef |grep rsync
ss -tnlp|grep rsync
[root@backup /]# ss -ntlp |grep rsync
LISTEN     0      5            *:873                      *:*                   users:(("rsync",pid=5599,fd=3))
LISTEN     0      5         [::]:873                   [::]:*                   users:(("rsync",pid=5599,fd=5))

f)测试服务端
rsync -avz 文件/目录 验证用户@ip::模块名字

#data->/etc/rsyncd.conf中的[data]
rsync -avz /etc/hostname rsync_backup@10.0.0.41::data
[root@backup /]# ll /data/
总用量 4
-rw-r--r-- 1 rsync rsync 7 9月  27 17:14 hostname

g)排错

看命令行错误提示,大概定位问题。
看日志,看日志,看日志。 /var/log/rsyncd.log ,/var/log/messages
看关键词 error或err或 failed
排查流程与搭建流程一致。

2)rsync客户端(nfs,web01)
其实就是把rsync的命令换到别的机器执行

1.创建客户端:所用密码文件(仅存放密码)
echo '1' >/etc/rsync.pass
chmod 600 /etc/rsync.pass
2.在客户端测试连接rsync服务端
rsync -avz /etc/hosts rsync_backup@10.0.0.41::data --password-file=/etc/rsync.pass

3)小结
在这里插入图片描述

1.4 rsync传输全流程详解

在这里插入图片描述

1.5 rsync服务总结

  • 基础特点:增量同步
  • rsync应用场景
  • rsync远程模式(用法,选项)
  • rsync守护进程模式,必会
  • 排错

2 发送邮件方法

2.1概述

通过邮件,微信,钉钉,短信,电话方式进行通知

mailx -s 'hb' 1542293291@qq.com </etc/hosts

在这里插入图片描述

内容比较捡漏需要优化

2.1 配置收件人

邮箱开启smtp功能
邮箱中获取授权码(密码)

在这里插入图片描述

在这里插入图片描述

vim /etc/mail.rc #写到最后
cat >>/etc/mail.rc<<EOF
set bsdcompat
set from=1542293291@qq.com
set smtp=smtp.qq.com 
set smtp-auth-user=1542293291@qq.com
set smtp-auth-password=xktfrfvypnvhheic
set smtp-auth=login
EOF

mailx -s 'you website is guale ' -a /etc/hostname 1542293291@qq.com </etc/hosts

3.项目案例:全网备份案例

在这里插入图片描述

3.1 项目背景:

刚刚入职,发现网站数据丢失,还无法恢复.没有备份.
决定实施备份项目,备份好网站架构的数据,配置文件,脚本....

3.2 项目步骤

规划下需要备份哪些内容.精确文件,目录.
待备份的内容:
	用户数据(数据库,存储).
	各种配置文件 (/etc/,某些软件的配置.)
	脚本.
	网站代码....
	略.
如何备份:
	书写备份脚本:
		备份/etc/目录,备份到/backup/ip/ tar
		备份完成,把备份推送到rsync服务端. rsync
		清除旧的备份
	定时任务定时运行备份.

1)服务端配置

#/etc/rsyncd.conf
[backup]
comment = "backup dir by hb"
path = /backup

systemctl restart rsyncd 
mkdir -p /backup 
chown rsync.rsync   /backup/
测试服务端是否可用(传输文件即可).

#nfs01:
rsync -avz /etc/hosts rsync_backup@10.0.0.41::backup --password-file=/etc/rsync.pass
  1. 客户端配置(脚本,定时任务)
    a)脚本
cat back-etc.sh
#!/bin/bash
#author:hb
#desc:备份/etc目录

ip_rsync_server=172.16.1.41
ip=`hostname -I |awk '{print $2}'`
time=`date +%F`

#1.备份目录
mkdir -p /backup/$ip
tar zcf /backup/$ip/etc.$time.tar.gz /etc/

#2.rsync传输备份
rsync -a /backup/ rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.pass

#3.删除旧的备份
#find /backup -type -f -mtime +7 -name "*.tar.gz" |xargs rm -f

b)定时任务

* * * * * sh /server/scripts/back-etc.sh &>/dev/null

c)检查服务端的备份是否存在

watch tree /backup

3)服务端

cat check_backup.sh 
#!/bin/bash
#author:hb
#desc:检查备份结果,清理旧的备份,发送邮件

#发送邮件
tree /backup/ |mailx -s '每日备份结果' 1542293291@qq.com

#清理旧的备份
find /backup -type f -mtime +365 -name "*.tar.gz" |xargs rm -f

#加入crontab

3.3项目总结

技术点:rsync守护进程模式,定时任务,脚本(打包备份,变量.),脚本执行检查.

服务端准备好,rsync守护进程模式: backup模块
客户端: 书写脚本,调试脚本
客户端: 书写定时任务执行脚本,
服务端: 书写备份检查脚本(发邮件,删除旧的备份命令.)
服务端,客户端调整定时任务: 
	客户端: 每天晚上12
	服务端: 每天晚上01点

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1463106.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Android 11以上获取不到第三方app是否安装

开年第一篇&#xff0c;处理了一下年前的小问题。 问题&#xff1a;本地app跳转到第三方app地图进行导航&#xff0c;获取不到第三方地图是否安装。 解决&#xff1a; 1.添加包名 This can be done by adding a <queries> element in the Android manifest.在app下的…

性能全面提升!探索ONLYOFFICE最新8.0版:更快速、更强大,PDF表单编辑轻松搞定!

文章目录 PDF表单功能表单模板 屏幕朗读器功能EXCEL新增功能单变量求解图表向导数字排序 PPT 新增功能新增语言区域设置和优化插件界面 ONLYOFFICE 是由 Ascensio System SIA 推出的一款功能强大的办公套件&#xff0c;其中提供了适用于文本文档、表格以及演示文稿的在线编辑软…

Redis部署方式(一)四种部署方式介绍

redis的四种部署方式&#xff1a; Redis单机模式部署、Redis主从模式部署、Redis哨兵模式部署、Cluster集群模式部署&#xff0c;后面三种&#xff08;主从模式&#xff0c;Sentinel哨兵模式&#xff0c;Cluster模式&#xff09;也可以统称为集群模式。 一、单机 1、缺点&…

简单实现节流函数踩的小坑

平时debounce&#xff08;防抖&#xff09;用得多&#xff0c;throttle用得少&#xff0c;记下写 throttle 时遇到的低级错误。 节流&#xff0c;一定时间内多次操作&#xff0c;在最早操作的若干延迟后执行。 场景参考&#xff1a;周期上报&#xff0c;有的数据不急着报&#…

OpenWRT部署web站点并结合内网穿透实现无公网ip远程访问

文章目录 前言1. 检查uhttpd安装2. 部署web站点3. 安装cpolar内网穿透4. 配置远程访问地址5. 配置固定远程地址 前言 uhttpd 是 OpenWrt/LuCI 开发者从零开始编写的 Web 服务器&#xff0c;目的是成为优秀稳定的、适合嵌入式设备的轻量级任务的 HTTP 服务器&#xff0c;并且和…

医疗行业的数字化转型:开发智慧医疗源码与互联网医院APP教学

今天&#xff0c;笔者将与大家共同了解医疗行业的数字化转型过程&#xff0c;重点关注开发智能医疗源码以及互联网医院APP的实践指南&#xff0c;希望能够为医疗机构的数字化建设提供有益的参考和指导。 一、数字化转型背景与意义 数字化转型则可以通过智能化技术&#xff0c;…

基于Android的大学生足球赛事管理系统的设计与实现

足球是世界范围内广受欢迎的一种体育运动&#xff0c;国内有中超、中甲及大学生联赛等各级别的赛事&#xff0c;中超和中甲基本上都有专业的球队在运营&#xff0c;而大学生联赛属于校园级别的赛事&#xff0c;其重视程度较为有限&#xff0c;使得其信息化水平不高&#xff0c;…

昇腾ACL应用开发之模型转换ATC

一.前提条件 在前面的章节中我们已经安装了包含模型转换的套件包CANN-TOOLKIT&#xff0c;默认的安装路径会在/usr/local/Ascend里面&#xff0c;我们将该套件所需要的东西加入到环境变量中以便我们调用&#xff1a; 将source /usr/local/Ascend/ascend-toolkit/set_env.sh加入…

yml配置文件中常见的配置及含义

1.数据库连接的相关配置 项目名称:datasource:driver-class-name: com.mysql.cj.jdbc.Driverhost: localhostport: 3306database: 数据库名username: 用户名password: 密码 springboot配置文件,用于配置数据库源连接信息 数据库驱动类型为com.mysql.cj.jdbc.Driver,这是数据…

35岁测试经理自述:为何我做测试十年,内心仍无比恐慌?

记得在求职的时候&#xff0c;面试官经常问我&#xff1a;“为什么要选择软件测试工作?” 而我也会经常说一堆自己有的没的优势去应付。 工作这么久了&#xff0c;也不再浮躁&#xff0c;静下心来回忆当初选择软件测试工作的历程&#xff0c;也是对自己职业生涯的一次回顾。 …

vulnhub靶场之Deathnote

一.环境搭建 1.靶场描述 Level - easy Description : dont waste too much time thinking outside the box . It is a Straight forward box . This works better with VirtualBox rather than VMware 2.靶场下载 https://www.vulnhub.com/entry/deathnote-1,739/ 3.启动环…

图——最小生成树实现(Kruskal算法,prime算法)

目录 预备知识&#xff1a; 最小生成树概念&#xff1a; Kruskal算法&#xff1a; 代码实现如下&#xff1a; 测试&#xff1a; Prime算法 &#xff1a; 代码实现如下&#xff1a; 测试&#xff1a; 结语&#xff1a; 预备知识&#xff1a; 连通图&#xff1a;在无向图…

手写线程池(JUC复习自用)

手写线程池&#xff08;复习自用&#xff09; 介绍代码 介绍 参考黑马满老师的JUC课程&#xff0c;给代码加上了相应的注释 如图所示&#xff0c;线程池核心线程数为1&#xff0c;任务队列的容量为1&#xff0c;假设要执行的线程数为4个&#xff0c;首先取一个放入线程池运行&a…

SpringBoot-2.7.6如何自定义自动配置和starter

1.Starter SpringBoot中的一大优势就是starter,SpringBoot也提供了很多开箱即用的starter依赖,使得我们开发变更加方便和简单,遵循约定大于配置的理念。 启动器是一组方便的依赖描述符,您可以将其包含在应用程序中。您可以获得所需的所有Spring和相关技术的一站式商店,而…

uni-app搭建h5项目

一、 打开官方网站 https://uniapp.dcloud.net.cn/quickstart-cli.html 二、找到使用vue-cli命令行&#xff0c;按照文档上的步骤进行搭建 全局安装 vue-cli npm install -g vue/cli搭建项目 可以根据命令行搭建&#xff0c;搭建vue2.0对应的是webpack&#xff0c; 也可以搭…

A2L文件添加结构体数组测量量,并进行测试

首先看到如下的待测的结构体数组变量是一个7x50的一个Uint32&#xff0c;相当于二维数组。 在A2L文件的Map File中搜索当前变量并新建为Map测量量 然后在Overview中选择当前结构体&#xff0c;选择属性Properties 选择数据类型为Ulong&#xff0c;就是uint32类型 配置map解析的…

【Python常用包】typing

目录 typing准备工作typing 实践Tuple、List、DictTuple - 用于定义元组类型的类型注解Dict - 用于定义字典类型的类型注解List - 用于定义列表类型的类型注解 UnionOptional 小结 typing 在 Python 中&#xff0c;typing 模块提供了一些辅助工具来帮助开发者编写类型注解&…

JAVA工程师面试专题-并发编程篇

目录 一、线程 1、并发与并行的区别 2、同步和异步的区别 3、Java中创建线程有哪些方式? 4、Thread和Runnable的区别 5、Java中的Runnable、Callable、Future、FutureTask的区别和联系&#xff1f; 6、说一下你对 CompletableFuture 的理解 7、volatile关键字有什么用&…

css2的三大特性

css的三大特性 一.层叠性概念 二.继承性行高的继承 三. 优先级概念a标签默认蓝色优先级注意事项 一.层叠性 概念 二.继承性 行高的继承 可用倍数表示三. 优先级 概念 a标签默认蓝色 优先级注意事项 例子

基于ExtendSim的半导体制造工厂仿真

这是一个离散事件模型&#xff0c;使用ExtendeSim “高级资源管理&#xff08;ARM&#xff09;”功能来组织和分配资源。 此模型使用离散事件仿真和高级资源管理&#xff08;ARM&#xff09;功能。ARM是一个集成系统&#xff0c;用于组织资源、区分资源并在整个模型中分配资源。…