Minio桶复制(Bucket Replication)入门

news2024/10/7 8:20:59

文章目录

  • 前言
  • 一、部署
    • 下载
    • 用户组
    • 添加 minio.service 文件
    • 新建配置文件 minio
    • 启动
  • 二、安装 mc
  • 三、桶复制
    • 1.权限
      • 建立 Replication Admin 用户
      • 建立 Replication Remote User 用户
    • 2.建立桶
    • 3建立桶复制
    • 4.验证
  • 总结
    • 遇到问题


前言

桶复制: 可以理解像 mysql 主从备份, 可以作为数据备份(我目前的需求也是如此)

1.minio 简单使用。
2.两台服务器(A,B),分别都是单节点单驱动部署(Single-Node Single-Drive)
3.A:源, B::目标
4.服务器系统版本 银河麒麟Linux(V10)
5.官方建议两个服务器的minio 版本最好一致


一、部署

参考官方文档:

下载

下载二进制文件
添加可执行权限
复制到 /usr/local/bin/ 目录下

wget https://dl.min.io/server/minio/release/linux-amd64/minio
chmod +x minio
sudo mv minio /usr/local/bin/

用户组

创建用户、组 (我觉得这步可以省略,直接使用 root 也可以,但是为了安全考虑还是建议跟着官方来做)

groupadd -r minio-user
useradd -M -r -g minio-user minio-user
# /mnt/data 就是要存贮文件的目录
chown minio-user:minio-user /mnt/data

添加 minio.service 文件

/etc/systemd/system/minio.service

内容如下:

[Unit]
Description=MinIO
Documentation=https://min.io/docs/minio/linux/index.html
Wants=network-online.target
After=network-online.target
AssertFileIsExecutable=/usr/local/bin/minio

[Service]
WorkingDirectory=/usr/local
# 用户和组,对应上面步骤的新建用户、组
User=minio-user
Group=minio-user
ProtectProc=invisible

EnvironmentFile=-/etc/default/minio
ExecStartPre=/bin/bash -c "if [ -z \"${MINIO_VOLUMES}\" ]; then echo \"Variable MINIO_VOLUMES not set in /etc/default/minio\"; exit 1; fi"
# 在这里我还指定了自定义端口 --address API 端口。  --console-address 浏览器访问的端口
ExecStart=/usr/local/bin/minio server $MINIO_OPTS $MINIO_VOLUMES --address ":9000" --console-address ":9999"
# 原文如下
# ExecStart=/usr/local/bin/minio server $MINIO_OPTS $MINIO_VOLUMES

# MinIO RELEASE.2023-05-04T21-44-30Z adds support for Type=notify (https://www.freedesktop.org/software/systemd/man/systemd.service.html#Type=)
# This may improve systemctl setups where other services use `After=minio.server`
# Uncomment the line to enable the functionality
# Type=notify

# Let systemd restart this service always
Restart=always

# Specifies the maximum file descriptor number that can be opened by this process
LimitNOFILE=65536

# Specifies the maximum number of threads this process can create
TasksMax=infinity

# Disable timeout logic and wait until process is stopped
TimeoutStopSec=infinity
SendSIGKILL=no

[Install]
WantedBy=multi-user.target

# Built for ${project.name}-${project.version} (${project.name})

新建配置文件 minio

/etc/default/minio

内容如下

# MINIO_ROOT_USER and MINIO_ROOT_PASSWORD sets the root account for the MinIO server.
# This user has unrestricted permissions to perform S3 and administrative API operations on any resource in the deployment.
# Omit to use the default values 'minioadmin:minioadmin'.
# MinIO recommends setting non-default values as a best practice, regardless of environment
# 这个可以理解是管理员的账号密码,浏览器访问ip:9999 需要用到
MINIO_ROOT_USER=myminioadmin
MINIO_ROOT_PASSWORD=minio-secret-key-change-me

# MINIO_VOLUMES sets the storage volume or path to use for the MinIO server.
# 需要改成要存贮文件的路径,一般指定空间比较大的分区
MINIO_VOLUMES="/mnt/data"

# MINIO_SERVER_URL sets the hostname of the local machine for use with the MinIO Server
# MinIO assumes your network control plane can correctly resolve this hostname to the local machine

# Uncomment the following line and replace the value with the correct hostname for the local machine and port for the MinIO server (9000 by default).

#MINIO_SERVER_URL="http://minio.example.net:9000"

启动

sudo systemctl start minio.service

到此部署完了
访问 IP:9999
看到登录页面
使用上面配置文件的账号、密码登录成功。
perfect!!!
在这里插入图片描述
在这里插入图片描述

二、安装 mc

参考官网教程

三、桶复制

1.权限

事后想想,直接用上面配置文件的管理员用户密码应该也可以。就不用再新建用户、权限了。
官方如下:

建立 Replication Admin 用户

在 A 服务器操作:

wget -O - https://min.io/docs/minio/linux/examples/ReplicationAdminPolicy.json | \
mc admin policy create minio-main ReplicationAdminPolicy /dev/stdin
mc admin user add minio-main ReplicationAdmin LongRandomSecretKey
mc admin policy attach minio-main ReplicationAdminPolicy --user ReplicationAdmin

创建别名

mc alias set minio-source http://A服务的IP:9000 ReplicationAdmin LongRandomSecretKey

建立 Replication Remote User 用户

在 B 服务器操作:

wget -O - https://min.io/docs/minio/linux/examples/ReplicationRemoteUserPolicy.json | \
mc admin policy create minio-slave ReplicationRemoteUserPolicy /dev/stdin
mc admin user add minio-slave ReplicationRemoteUser LongRandomSecretKey
mc admin policy attach minio-slave ReplicationRemoteUserPolicy --user ReplicationRemoteUser

2.建立桶

分别在 A, B 服务器建立桶
特别注意
启用 version
启用 object locking
如下:
在这里插入图片描述

3建立桶复制

在 A 服务器操作
前提:我在 A 建立了 bucket : test7; B建立了 bucket : test8 ; (可以同名

mc replicate add minio-source/test7 \
--remote-bucket 'http://ReplicationRemoteUser:LongRandomSecretKey@B的IP:9000/test8' \
   --replicate "delete,delete-marker,existing-objects"

如下代表成功:
在这里插入图片描述

4.验证

在 A test7 上传,删除 文件, B test8 也是有同样的效果。


总结

总体比较简单,就是遇到问题不好排查,毕竟 Minio 还在完善。

遇到问题

开始我就遇到 cannot be identical
如下的问题
在这里插入图片描述
网上找了很久,但是没有找到和我相似的问题,感觉这个问题就我一个人遇到。
最后还是想到去官方 githup 问题版块去搜问题,好巧不巧刚好遇到和我一样的问题,并且作者给出解决方案,总之就是下载最新版本替换 /usr/local/bin/minio 就好了。
!!! 以后遇到问题还是多多从源头去找答案。
在这里插入图片描述

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/768444.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

基于linux下的高并发服务器开发(第二章)- 2.10 进程间通信简介

面试官经常问: ① 你知道进程间通信的方式有哪几种吗? ② 进程间通信当中某一个方式一个具体的原理是什么?怎么去实现呢? 01 / 进程间通讯概念 02 / Linux进程间通信的方式 怎样理解阻塞非阻塞与同步异步的区别? 怎样…

SpringCloud Gateway网关

文章目录 SpringCloud Gateway1.1 网关架构1.2微服务网关介绍1.3Spring Cloud Gateway(技术选型)1.4依赖1.5yaml配置(包含gateway相关配置,实现转发的功能)1.6断言案例:1.7断言详细介绍1.8 整合nacos1.9 nacos整合网关案例1.10动态路由 SpringCloud Gateway 1.1 网关架构 (dub…

专题-【哈夫曼树】

14年三-1) 已知电文信息为“PEFFQ RQRFE QFPQR FPER” (1)请按此信息构造哈夫曼树,求出每个字符的最优编码; (2)若对每个字符进行等长编码,至少需要几位二进制数?哈夫…

小研究 - 面向 Java 的高对抗内存型 Webshell 检测技术(二)

由于 Web 应用程序的复杂性和重要性, 导致其成为网络攻击的主要目标之一。攻击者在入侵一个网站后, 通常会植入一个 Webshell, 来持久化控制网站。但随着攻防双方的博弈, 各种检测技术、终端安全产品被广泛应用, 使得传统的以文件形式驻留的 Webshell 越来越容易被检测到, 内存…

# Linux终端控制字符详解以及简单应用实践

Linux终端控制字符详解以及简单应用实践 文章目录 Linux终端控制字符详解以及简单应用实践1 控制字符表2 控制字符 ESC (0x1B,^[)子参数表3 控制字符 ESC (0x1B,^[)子参数表 - 字符颜色参照表4 实践&#x…

Windows 如何锁定文件

一、背景 如果应用程序有操作本地文件的功能(如:读、写、复制、移动、删除等等),那么在测试或调试该应用程序时,肯定需要测试文件被其他应用程序锁定时,你的应用程序是如何处理的。 那么如何在本地模拟文件…

抓包工具Fiddler的下载安装使用

文章目录 Fiddler1. 安装与使用教程2. 抓包工具的原理 Fiddler 1. 安装与使用教程 下载地址: https://www.telerik.com/fiddler/ 安装过程只用一路next即可; 下图是我们安装好Fiddler打开的界面: 右侧显示就是我们主机发送http/https请求的记录。如果…

黑马头条 分布式任务调度 定时计算热点文章、xxl-job、kafkaStream

xxl-Job分布式任务调度 1 今日内容 1.1 需求分析 目前实现的思路:从数据库直接按照发布时间倒序查询 问题1: 如何访问量较大,直接查询数据库,压力较大问题2: 新发布的文章会展示在前面,并不是热点文章 1.2 …

Flutter——最详细(NavigationRail)使用教程

NavigationRail 简介 一个 Material Design 小部件,旨在显示在应用程序的左侧或右侧,以便在少量视图(通常在三到五个视图之间)之间导航。 使用场景: 通过Row属性,左侧或右侧菜单栏按钮 属性作用onDestinati…

Hadoop——大数据生态体系详解

一.大数据概论 1.1 大数据概念 大数据(big data):指无法在一定时间范围内用常规软件工具进行捕捉、管理 和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程 优化能力的海量、高增长率和多样化的信息资产…

前端 Jenkins 自动化部署

由于公司使用自己搭建的 svn 服务器来进行代码管理,因此这里 Jenkins 是针对 svn 服务器来进行的配置,其实跟Git 配置基本一致。 在没有自动化部署前 之前项目每次修改之后都需要本地 ​​npm run build ​​一次手动发布到服务器上方便测试和产品查看…

微服务组件Feign实战 - 解决日志配置失效

1. RPC概述 思考: 微服务之间如何方便优雅的实现服务间的远程调用? RPC 全称是 Remote Procedure Call ,即远程过程调用,其对应的是我们的本地调用。RPC 的目的是:让我们调用远程方法像调用本地方法一样。 //本地调用…

【unity之IMGUI实践】游戏玩法逻辑实现【四】

👨‍💻个人主页:元宇宙-秩沅 👨‍💻 hallo 欢迎 点赞👍 收藏⭐ 留言📝 加关注✅! 👨‍💻 本文由 秩沅 原创 👨‍💻 收录于专栏:uni…

3.11 Bootstrap 徽章(Badges)

文章目录 Bootstrap 徽章(Badges)激活导航状态 Bootstrap 徽章(Badges) 下面将讲解 Bootstrap 徽章(Badges)。徽章与标签相似,主要的区别在于徽章的边角更加圆滑。 徽章(Badges&…

短视频seo抖音矩阵号系统源码开发搭建分享

我们自主研发的短视频矩阵系统源码,技术研发的独立核心算法的视频内容管理和展示功能。无需额外的流量接口费用和复杂的配置,轻松地创建和管理短视频内容,短视频矩阵源码是指将抖音平台上的视频资源进行筛选、排序等操作,进而提升…

【ROS】ROS1人机界面开发:在QtCreator中创建ROS1功能包

【ROS】郭老二博文之:ROS目录 1、版本要求 ROS的QtCreator插件要和QtCreator版本对应一致,否则报错。 本人QtCreator版本为:10.0.1,需要下载安装ros_qtc_plugin的版本也要为10.0版本 2、安装 ros_qtc_plugin 2.1 下载插件 github:https://github.com/ros-industrial…

基于fpga实现tft屏幕显示数字、字母

简介 开发平台:ZYNQ 开发工具:Vivado 2018.3 tft屏幕分辨率:800*480 在PL端使用纯verilog实现bitmap模块,基于该模块实现在tft屏幕显示数字0-9,以及FPGA字母 Bitmap模块 该模块为5*5的bitmap,纯组合逻辑&…

7-18作业

#include<iostream>using namespace std; class My_stack { private:int* ptr; //执行堆区空间int top;int size; //记录栈顶元素public:My_stack() :ptr(new int[10]), top(-1), size(10) {}//有参构造My_stack(int size) :ptr(new int[10]), top(-1), size(siz…

Android 网络游戏开发入门简单示例

在Android系统上开发是Android开发学习者所向往的&#xff0c;有成就感也有乐趣&#xff0c;还能取得经济上的报酬。那怎样开发Android网络游戏攻略呢&#xff1f;下面介绍一个简单的入门实例。 一、创建新工程   首先&#xff0c;我们在Eclipse中新建一个名为Movement的工程…

简单工厂模式(java)

目录 结构 案例 类图 代码实现 简单咖啡工厂类 咖啡店类 咖啡类 具体咖啡类 简单工厂方法的优缺点 优点 缺点 结构 简单工厂包含如下角色&#xff1a; 抽象产品 &#xff1a;定义了产品的规范&#xff0c;描述了产品的主要特性和功能。具体产品 &#xff1a;实现或者…