百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

私有对象存储(minio)的备份以及还原

bigegpt 2024-08-11 14:15 6 浏览

minio的应用场景

  1. 分布式文件存储: MinIO 提供了高度可扩展的分布式对象存储服务,适用于构建大规模文件存储解决方案。它可以轻松地扩展以适应增长的数据量,同时保持高性能和低延迟。
  2. 数据湖(Data Lake): MinIO 可以作为数据湖的存储后端,用于存储结构化和非结构化数据。它支持 S3 兼容的 API,因此可以轻松集成到数据湖架构中,并与各种数据处理工具和框架协同工作。
  3. 备份和归档: MinIO 可以用于存储备份和归档数据。由于其分布式和容错性,MinIO 可以确保数据的安全性和可靠性。通过使用版本控制和生命周期策略,可以灵活地管理备份和归档策略。
  4. 云原生应用程序: MinIO 是一个云原生存储解决方案,适用于构建云原生应用程序。它支持容器化部署,可以轻松集成到 Kubernetes 等容器编排系统中。MinIO 可以用于存储云原生应用程序的对象、文件和数据。
  5. 媒体存储和流媒体服务: MinIO 的高性能和低延迟使其成为媒体存储和流媒体服务的理想选择。它支持大文件的快速读写,适用于存储和处理大规模的媒体文件。
  6. 大数据分析: MinIO 可以用作大数据分析平台的对象存储后端。它兼容 S3 API,因此可以与各种大数据工具和框架(如 Apache Spark、Apache Hadoop)无缝集成。
  7. 开发和测试环境: MinIO 提供了一个轻量级的对象存储解决方案,可以用于开发和测试环境。开发人员可以在本地或在云中轻松搭建 MinIO 实例,以模拟对象存储环境。

minio的备份还原操作

1.备份命令客户端安装

curl https://dl.min.io/client/mc/release/linux-amd64/mc   --create-dirs   -o $HOME/minio-binaries/mc

chmod +x $HOME/minio-binaries/mc

export PATH=$PATH:$HOME/minio-binaries/
// 测试命令
  mc alias ls
  root@redis-cluster:~/minio-bak# mc alias ls
gcs     
  URL       : https://storage.googleapis.com
  AccessKey : YOUR-ACCESS-KEY-HERE
  SecretKey : YOUR-SECRET-KEY-HERE
  API       : S3v2
  Path      : dns

local   
  URL       : http://localhost:9000
  AccessKey : 
  SecretKey : 
  API       : 
  Path      : auto

play    
  URL       : https://play.min.io
  AccessKey : Q3AM3UQ867SPQQA43P2F
  SecretKey : zuf+tfteSlswRu7BJ86wekitnifILbZam1KYY3TG
  API       : S3v4
  Path      : auto

s3      
  URL       : https://s3.amazonaws.com
  AccessKey : YOUR-ACCESS-KEY-HERE
  SecretKey : YOUR-SECRET-KEY-HERE
  API       : S3v4
  Path      : dns

2.创建链接信息

mc alias set devminio http://10.41.17.220:9000 admin 1qaz@WSX  //参数解释 devminio(名称)http://10.41.17.220:9000 admin 1qaz@WSX地址以及账号密码
//查看是否链接成功
root@redis-cluster:~/minio-bak# mc ls devminio 
[2022-08-31 11:17:09 CST]     0B dolphinscheduler/
[2023-03-13 16:10:04 CST]     0B efssc-damon-private-read/
[2021-12-07 17:54:43 CST]     0B efssc-dev-private-read/
[2023-03-15 19:13:09 CST]     0B test/
  //查看桶的大小
  root@redis-cluster:~/minio-bak# mc du devminio 
743MiB  2350 objects
//查看所有alias
root@redis-cluster:~/minio-bak# mc alias ls
devminio
  URL       : http://10.41.17.220:9000
  AccessKey : admin
  SecretKey : 1qaz@WSX
  API       : s3v4
  Path      : auto

3.进行桶目录的备份以及恢复

//备份操作
root@redis-cluster:~/minio-bak# mc cp -r devminio/efssc-dev-private-read ./
...09635507175426.xlsx: 718.41 MiB / 718.41 MiB ━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━ 94.40 MiB/s 7sroot@redis-cluster:~/minio-bak# ls
efssc-dev-private-read
//恢复操作    
root@redis-cluster:~/minio-bak# mc cp -r efssc-dev-private-read devminio/efssc-dev-private-read
...09635507175426.xlsx: 718.41 MiB / 718.41 MiB ━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━root@redis-cluroot@redis-cluster:~/minio-bak# ls efssc-dev-private-read/
//这里恢复会创建新的存储对象 导致使用的存储对象空间翻倍,
//使用--force参数可进行覆盖以及删除老的存储对象(谨慎操作)



相关推荐

5分钟搭建公网https网页文件服务器,免费权威TLS证书

请关注本头条号,每天坚持更新原创干货技术文章。如需学习视频,请在微信搜索公众号“智传网优”直接开始自助视频学习前言本文主要讲解如何快速搭建一个https网页文件服务器,并免费申请权威机构颁发的tls证...

nginx负载均衡配置(nginx负载均衡配置两个程序副本)

Nginx是什么没有听过Nginx?那么一定听过它的“同行”Apache吧!Nginx同Apache一样都是一种WEB服务器。基于REST架构风格,以统一资源描述符(UniformResources...

19《Nginx 入门教程》Nginx综合实践

今天我们将基于Nginx完成两个比较有用的场景,但是用到的Nginx的配置非常简单。内部Yum源搭建内部Pip源搭建1.实验环境ceph1centos7.6内网ip:172.16....

Nginx性能调优与优化指南(nginx优化配置大全)

Nginx性能调优需要结合服务器硬件资源、业务场景和负载特征进行针对性优化。以下是一些关键优化方向和具体配置示例:一、Nginx配置优化1.进程与连接数优化nginxworker_process...

C++后端开发必须彻底搞懂Nginx,从原理到实战(高级篇)

本文为Nginx实操高级篇。通过配置Nginx配置文件,实现正向代理、反向代理、负载均衡、Nginx缓存、动静分离和高可用Nginx6种功能,并对Nginx的原理作进一步的解析。当需...

【Nginx】史上最全的Nginx配置详解

Nginx服务器配置中最频繁的部分,代理、缓存和日志定义等绝大多数功能和第三方模块的配置都在这里,http块又包括http全局块和server块。Nginx是非常重要的负载均衡中间件,被广泛应用于大型...

【Nginx】Nginx 4种常见配置实例(nginx基本配置与参数说明)

本文主要介绍nginx4种常见的配置实例。Nginx实现反向代理;Nginx实现负载均衡;Nginx实现动静分离;Nginx实现高可用集群;Nginx4种常见配置实例如下:一、Nginx反向代理配...

使用nginx+allure管理自动化测试报告

allure在自动化测试中经常用来生成漂亮的报告,但是网上及官网上给出的例子都仅仅是针对单个测试用例文件的形式介绍的,实际使用中,自动化测试往往需要包含不止一个产品或项目,本文介绍如何使用nginx+...

nginx配置文件详解(nginx配置文件详解高清版)

Nginx是一个强大的免费开源的HTTP服务器和反向代理服务器。在Web开发项目中,nginx常用作为静态文件服务器处理静态文件,并负责将动态请求转发至应用服务器(如Django,Flask,et...

SpringCloud Eureka-服务注册与发现

1.Eureka介绍1.1学习Eureka前的说明目前主流的服务注册&发现的组件是Nacos,但是Eureka作为老牌经典的服务注册&发现技术还是有必要学习一下,原因:(1)一些早期的分布式微服...

微服务 Spring Cloud 实战 Eureka+Gateway+Feign+Hystrix

前言我所在项目组刚接到一个微服务改造需求,技术选型为SpringCloud,具体需求是把部分项目使用SpringCloud技术进行重构。本篇文章中介绍了Eureka、Gateway、Fe...

深度剖析 Spring Cloud Eureka 底层实现原理

你作为一名互联网大厂后端技术开发人员,在构建分布式系统时,是不是常常为服务的注册与发现而头疼?你是否好奇,像SpringCloudEureka这样被广泛使用的组件,它的底层实现原理到底是怎样的...

热爱生活,喜欢折腾。(很热爱生活)

原文是stackoverflow的一则高票回答,原文链接可能之前也有人翻译过,但是刚好自己也有疑惑,所以搬运一下,个人水平有限所以可能翻译存在误差,欢迎指正(如侵删)。尽管classmethod和st...

GDB调试的高级技巧(详细描述gdb调试程序的全过程)

GDB是我们平时调试c/c++程序的利器,查起复杂的bug问题,比打印大法要好得多,但是也不得不说,gdb在默认情况下用起来并不是很好用,最近学习到几个高级点的技巧,分享下:一美化打印先上个例子...

Arduino 实例(二十三)Arduino 给Python 编译器发送信息

1首先Python需要安装Pyserial库,在命令提示符中输入pipintallpyserial若是遇到提示‘pip‘不是内部或外部命令,也不是可运行的程序或批处理文件,则需要设置环境变...