百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

Minio的安装和数据高可用原理

bigegpt 2024-08-11 14:15 12 浏览

Minio是一款分布式对象存储软件,使用比较广泛。这篇文章介绍Minio的安装,这是一个准生产环境的安装,如果是生产环境需要考虑日后的扩容和高可用保证。

  • 实验环境

操作系统:CentOS Linux release 7.9.2009 (Core)

Minio版本:

minio version RELEASE.2024-04-06T05-26-02Z (commit-id=9d63bb1b418f6c1bbcc8434fff5d8aba810ee5d7)
Runtime: go1.21.9 linux/amd64
License: GNU AGPLv3 <https://www.gnu.org/licenses/agpl-3.0.html>
Copyright: 2015-2024 MinIO, Inc.

集群配置:单节点配置四块硬盘

  • 前期准备

升级内核:CentOS 7.9默认是3.10版本的内核,按官方建议升级到4.0及以上。

包含序号的主机名:minio1.example.cn,这个主要为后面扩容方便。

时间同步:生产环境minio多节点部署,需要时间同步,可以安装ntpd并配置国内时间服务器。

硬盘配置:服务器挂载四块硬盘,并格式化为XFS文件系统,格式化时配置label。

其他三块硬盘使用相同命令格式化,label分别为“minio12,minio13,minio14”。

配置/etc/fstab,并执行命令“mount -a”挂载全部硬盘

  • 安装与配置

从minio官网下载minio.rpm文件,使用rpm -i minio.rpm命令安装,这是官方推荐的minio安装方式,它会自动创建minio的 Systemd Unit文件,这样可以通过systemd来管理服务的启停。启动前创建环境变量文件,

/etc/default/minio

MINIO_VOLUMES="http://minio1.example.cn:9000/mnt/disk{1...4}/minio"
MINIO_OPTS="--console-address :9001"
MINIO_ROOT_USER=minioadmin
MINIO_ROOT_PASSWORD=minioadminWo3
MINIO_SERVER_URL="http://minio1.example.cn:9000"

因为minio Unit文件使用minio-user用户管理minio服务,所以需要创建minio-user系统用户

useradd minio-user

修改后端存储的目录所有者为minio-user

chown -R minio-user:minio-user /mnt

使用下面命令启动服务并配置开机自启

systemctl start minio
systemctl enable minio

此时使用浏览器访问“http://minio1.example.cn:9001”,即可访问minio的Web管理界面。

  • mc安装与集群访问

mc是minio的命令行管理工具,因为也是使用Golang编写,直接官网下载放到$PATH环境变量包含的目录并赋予可执行权限便可使用,添加访问Alias,

mc alias set mm http://minio1.example.cn:9000 minioadmin minioadminWo3

配置按照下面格式即可,

mc alias set ALIAS URL ACCESSKEY SECRETKEY

mc的帮助文档很全面,有任何疑问可以使用"mc -h"这样的格式查询文档,“-h”放在末尾

  • 高可用原理

使用上面配置好的mc命令查看集群状态,显示如下,

可知minio集群有一个服务器池(Pool),一个纠删集(Erasure sets),其中包含四块硬盘。minio使用了纠删码(Erasure Coding)来提高数据的冗余性和可靠性,上面纠删集大小是4(因为是四块硬盘),这四块硬盘有一部分用来存储对象的真实数据,有一部分用来存储对象的校验数据(Parity),根据minio的默认设置(STANDARD storage class)如下,

四块硬盘将有两块用来存储对象真实数据,其他两块用来存储校验数据。使用的底层空间是实际数据的两倍。下面这幅图可以看出文件系统确实被占用了实际数据的两倍,

优点是损失任意两块(不管是数据盘还是校验盘)硬盘不影响数据的只读,损失一块不影响数据的读写。可以手动umount掉两块硬盘,验证这个理论,

模拟硬盘故障,umount掉两块硬盘后,数据仍然可以正常读取,但是已经不能写入了,

这里使用的默认奇偶校验(Default Parity)为EC:2,因为总共只有四块硬盘,已经达到最大的EC:N,其中N为存放校验数据的硬盘块数,minio为了防止裂脑,限制了写入操作,但读取不受影响。

  • 总结

生产环境要规划好服务器的个数和每台服务器硬盘的个数,最大限度保证数据的高可用也方便后续的空间扩容。

希望这篇文章能帮助到你!

相关推荐

5分钟调色大片的方法(5分钟调色大片的方法有哪些)

哈喽大家好。在大家印象中一定觉得ps非常难学非常难。大家不要着急,小编的教学都是针对ps零基础的同学的,而且非常实用哦。只要大家跟着图文练习一两遍,保证大家立马学会~!好了,废话少说,下面开始我们今天...

闪白特效原来是这么用的(闪白特效怎么使用)

作者|高艳侠订阅|010-86092062闪白特效是影视作品中应用比较多的效果之一,那么具体该在哪些场景使用闪白特效?具体该如何操作?下面就以AdobePremiere(以下简称PR)为例,...

ppt常用小图标去哪里找?3个矢量素材网站推荐!

ppt是一个注重可视化表达的演示载体,除了高清图片,ppt中另一类常用的素材是各种小图标,也叫矢量图标,巧妙运用小图标能提升整体美观度和表现力,那么ppt常用小图标去哪里找呢?为方便各位快速找到合适的...

有什么好用的截图录屏工具?试试这9款

经常有朋友反馈苦于缺乏截屏和录屏的趁手工具,本期我们分享几个相当好用的截屏和录屏工具,希望能帮到大家。ScreenToGifScreenToGif是一款免费且开源的录屏工具。此款工具最大的特点是可以...

配色苦手福音!专业快速色环配色PS插件

今天橘子老师给的大家介绍的是一款快速配色的插件,非常强大配色苦手福音来啦!(获取方式见文末)【插件介绍】配色在后期设计中占有主导地位,好的配色能让作品更加抢眼Coolorus这款专业的配色插件,能够...

如何用PS抠主体?(ps怎么抠主体)

1.主体法抠图-抠花苞和花梗导入一张荷花苞的照片,点击上图中顶部“选择”菜单栏,下拉单击“主体”。可以看到,只有花苞被选中,但是花梗并没有被选中。接下来单击上图中左侧工具栏的“快速选择工具”,上图中顶...

2799元的4K电视,有保障吗?(买4k电视机哪个品牌好)

在上一期《电脑报》的3·15专题报道中,我们揭露了一款不靠谱的42英寸4K智能电视——TCLD42A561U。这款售价2699元的4K智能电视不仅4K画质方面存在严重问题,而且各种功能和应用体验也不理...

苹果电脑的Touch Bar推出一段时间了 这款工具可以帮你开发适用于它的APP

距离苹果推出带有TouchBar的MacBookPro已经有一段时间了,除了那些像Adobe、Google和Microsoft大公司在开发适用于TouchBar的应用之外,其实还有很多独立的开...

如魔法般吸取颜色的桌灯(如魔法般吸取颜色的桌灯叫什么)

色彩为生活带来的感官刺激,逐渐被视为理所当然。一盏桌灯运用它的神奇力量,将隐藏于物件中的颜色逐一释放,成为装点环境的空间魔法师。ColorUp是一款可以改变颜色的吸色台灯,沿用传统灯泡的造型,融入了拾...

一篇文章带你用jquery mobile设计颜色拾取器

【一、项目背景】现实生活中,我们经常会遇到配色的问题,这个时候去百度一下RGB表。而RGB表只提供相对于的颜色的RGB值而没有可以验证的模块。我们可以通过jquerymobile去设计颜色的拾取器...

ps拾色器快捷键是什么?(ps2019拾色器快捷键)

ps拾色器快捷键是什么?文章末尾有获取方式,按照以下步骤就能自动获得!学会制作PS特效需要一定程度的耐心和毅力。初学者可以从基本的工具和技术开始学习,逐渐提高他们的技能水平。同时,观看更多优秀的特效作...

免费开源的 Windows 截图录屏工具,支持 OCR 识别和滚动截图等

功能很强大、安装很小巧的免费截图、录屏工具,提供很多使用的工具来帮我么能解决问题,推荐给大家。关于ShareXShareX是一款免费的windows工具,起初是一个小巧的截图工具,经过多年的迭...

入门到精通系列PS教程:第13篇 · 拾色器、颜色问题说明及补充

入门到精通系列PS教程:第13篇·拾色器、颜色问题说明及补充作者|侯潇问题说明我的第12篇教程里,有个小问题没有说清楚。要说是错误,又不算是错误,只是没有说准确。写完那篇教程后,因为已经到了深...

PS冷知识:用吸管工具吸取屏幕上的任意颜色

今天,我们给大家介绍PS中的一个冷知识:用吸管工具可以吸取屏幕上的任意颜色。其实,操作起来是非常简单的。大多数情况下,我们认为,PS的吸管工具只能吸取PS软件作图区域范围内的颜色,最多加上画布四周的...

Windows 11 将提供内置颜色选择器工具

Windows11内置了颜色选择器,可以扫描并识别屏幕上的颜色并生成颜色代码。此外,微软还利用人工智能技术,让屏幕上的文本扫描和选择变得更加便捷。这两项功能均已在SnippingToolv1...