minio的应用场景
- 分布式文件存储: MinIO 提供了高度可扩展的分布式对象存储服务,适用于构建大规模文件存储解决方案。它可以轻松地扩展以适应增长的数据量,同时保持高性能和低延迟。
- 数据湖(Data Lake): MinIO 可以作为数据湖的存储后端,用于存储结构化和非结构化数据。它支持 S3 兼容的 API,因此可以轻松集成到数据湖架构中,并与各种数据处理工具和框架协同工作。
- 备份和归档: MinIO 可以用于存储备份和归档数据。由于其分布式和容错性,MinIO 可以确保数据的安全性和可靠性。通过使用版本控制和生命周期策略,可以灵活地管理备份和归档策略。
- 云原生应用程序: MinIO 是一个云原生存储解决方案,适用于构建云原生应用程序。它支持容器化部署,可以轻松集成到 Kubernetes 等容器编排系统中。MinIO 可以用于存储云原生应用程序的对象、文件和数据。
- 媒体存储和流媒体服务: MinIO 的高性能和低延迟使其成为媒体存储和流媒体服务的理想选择。它支持大文件的快速读写,适用于存储和处理大规模的媒体文件。
- 大数据分析: MinIO 可以用作大数据分析平台的对象存储后端。它兼容 S3 API,因此可以与各种大数据工具和框架(如 Apache Spark、Apache Hadoop)无缝集成。
- 开发和测试环境: MinIO 提供了一个轻量级的对象存储解决方案,可以用于开发和测试环境。开发人员可以在本地或在云中轻松搭建 MinIO 实例,以模拟对象存储环境。
minio的备份还原操作
1.备份命令客户端安装
curl https://dl.min.io/client/mc/release/linux-amd64/mc --create-dirs -o $HOME/minio-binaries/mc
chmod +x $HOME/minio-binaries/mc
export PATH=$PATH:$HOME/minio-binaries/
// 测试命令
mc alias ls
root@redis-cluster:~/minio-bak# mc alias ls
gcs
URL : https://storage.googleapis.com
AccessKey : YOUR-ACCESS-KEY-HERE
SecretKey : YOUR-SECRET-KEY-HERE
API : S3v2
Path : dns
local
URL : http://localhost:9000
AccessKey :
SecretKey :
API :
Path : auto
play
URL : https://play.min.io
AccessKey : Q3AM3UQ867SPQQA43P2F
SecretKey : zuf+tfteSlswRu7BJ86wekitnifILbZam1KYY3TG
API : S3v4
Path : auto
s3
URL : https://s3.amazonaws.com
AccessKey : YOUR-ACCESS-KEY-HERE
SecretKey : YOUR-SECRET-KEY-HERE
API : S3v4
Path : dns
2.创建链接信息
mc alias set devminio http://10.41.17.220:9000 admin 1qaz@WSX //参数解释 devminio(名称)http://10.41.17.220:9000 admin 1qaz@WSX地址以及账号密码
//查看是否链接成功
root@redis-cluster:~/minio-bak# mc ls devminio
[2022-08-31 11:17:09 CST] 0B dolphinscheduler/
[2023-03-13 16:10:04 CST] 0B efssc-damon-private-read/
[2021-12-07 17:54:43 CST] 0B efssc-dev-private-read/
[2023-03-15 19:13:09 CST] 0B test/
//查看桶的大小
root@redis-cluster:~/minio-bak# mc du devminio
743MiB 2350 objects
//查看所有alias
root@redis-cluster:~/minio-bak# mc alias ls
devminio
URL : http://10.41.17.220:9000
AccessKey : admin
SecretKey : 1qaz@WSX
API : s3v4
Path : auto
3.进行桶目录的备份以及恢复
//备份操作
root@redis-cluster:~/minio-bak# mc cp -r devminio/efssc-dev-private-read ./
...09635507175426.xlsx: 718.41 MiB / 718.41 MiB ━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━ 94.40 MiB/s 7sroot@redis-cluster:~/minio-bak# ls
efssc-dev-private-read
//恢复操作
root@redis-cluster:~/minio-bak# mc cp -r efssc-dev-private-read devminio/efssc-dev-private-read
...09635507175426.xlsx: 718.41 MiB / 718.41 MiB ━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━root@redis-cluroot@redis-cluster:~/minio-bak# ls efssc-dev-private-read/
//这里恢复会创建新的存储对象 导致使用的存储对象空间翻倍,
//使用--force参数可进行覆盖以及删除老的存储对象(谨慎操作)