百度360必应搜狗淘宝本站头条
mqtt服务器xftp6vscode使用技巧mybatiscollectionkeyerror
当前位置：网站首页 > 热门文章 > 正文

浅谈Minio基础、配置和代码运用

bigegpt 2024-08-11 14:16 11 浏览

在上一篇文章《浅谈FastDFS基础、配置和代码运用》中介绍了分布式文件系统FastDFS，有读者评论说到了分布式文件系统Minio，今天就再聊聊Minio，顺便对这两种分布式文件系统进行一个简单的对比，方便大家掌握和选择。

一、Minio基础知识

Minio是一款高性能的对象存储服务器，它兼容Amazon S3 API。它的设计目的是为了提供云存储服务的性能和可扩展性，同时还保持着本地存储的简单性和易用性。Minio可以在Linux、MacOS和Windows等操作系统上运行，它可以通过命令行界面或RESTful API进行管理。

Minio的核心是对象存储，对象是一组二进制数据和元数据的组合。对象可以存储为文件，也可以存储为内存中的数据结构。对象可以存储在不同的存储介质中，如本地磁盘、网络文件系统、云存储等。Minio支持多种存储介质，它可以轻松地将数据存储到本地磁盘、Amazon S3、Google Cloud Storage、Microsoft Azure Blob Storage等云存储服务中。

Minio的架构采用了分布式的设计，它可以将数据分散存储在多个节点中，从而实现数据的高可用和容错性。在Minio中，节点被称为Minio Server，每个Minio Server可以存储一个或多个对象存储桶。对象存储桶是一组对象的集合，类似于文件系统中的文件夹。每个对象存储桶都有一个唯一的名称，它可以在Minio集群中全局唯一。

Minio的数据访问是通过RESTful API实现的，它可以提供各种数据管理功能，如创建、删除、读取、写入对象等。Minio的API与Amazon S3 API兼容，这意味着您可以使用Amazon S3 SDK和工具来与Minio交互。

二、Minio配置

在开始使用Minio之前，您需要先进行配置。下面是一个简单的配置示例：

version: '3'
services:
  minio:
    image: minio/minio
    volumes:
      - ./data:/data
    environment:
      MINIO_ACCESS_KEY: accesskey
      MINIO_SECRET_KEY: secretkey
    ports:
      - "9000:9000"
    command: server /data

上述配置使用Docker部署了一个Minio Server，它使用本地磁盘作为存储介质，并将数据存储在./data目录中。MINIO_ACCESS_KEY和MINIO_SECRET_KEY是访问密钥和密钥的设置，您可以根据需要进行更改。在此配置中，Minio Server将在9000端口上监听请求。

三、代码运用

使用Minio的API可以通过各种编程语言和工具进行，这里以Java为例，介绍如何使用Minio SDK实现对象存储的基本操作。

1、配置Minio Client

首先，您需要配置Minio Client。Minio Client是一个命令行工具，它提供了与Minio Server交互的API，可以使用它来创建、删除、上传、下载对象等操作。以下是使用Java语言配置Minio Client的示例代码：

import io.minio.MinioClient;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // List buckets
            for (Bucket bucket : minioClient.listBuckets()) {
                System.out.println(bucket.name() + " " + bucket.creationDate());
            }
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将创建一个MinioClient对象，并使用该对象列出所有的存储桶。

2、创建存储桶

接下来，您需要创建一个新的存储桶。以下是使用Java语言创建存储桶的示例代码：

import io.minio.MinioClient;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Create a new bucket
            String bucketName = "mybucket";
            boolean bucketFound = minioClient.bucketExists(bucketName);
            if (bucketFound) {
                System.out.println("Bucket already exists.");
            } else {
                minioClient.makeBucket(bucketName);
                System.out.println("Bucket created successfully.");
            }
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将创建一个名为mybucket的存储桶。如果该桶已经存在，则输出“Bucket already exists.”；否则，创建该桶并输出“Bucket created successfully.”。

3、上传对象

上传对象是Minio对象存储的一项基本操作。以下是使用Java语言上传对象的示例代码：

import io.minio.MinioClient;
import java.io.File;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Upload object
            String bucketName = "mybucket";
            String objectName = "myobject";
            File file = new File("/path/to/myfile.txt");
            minioClient.putObject(bucketName, objectName, file.getAbsolutePath());
            System.out.println("Object uploaded successfully.");
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将上传名为myobject的文件到mybucket存储桶中。要上传文件，需要提供存储桶名称、对象名称和文件路径。

4、下载对象

下载对象是从Minio对象存储中检索对象的一项基本操作。以下是使用Java语言下载对象的示例代码：

import io.minio.MinioClient;
import java.io.InputStream;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Download object
            String bucketName = "mybucket";
            String objectName = "myobject";
            InputStream stream = minioClient.getObject(bucketName, objectName);
            byte[] buffer = new byte[stream.available()];
            stream.read(buffer);
            System.out.println(new String(buffer));
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将从mybucket存储桶中下载名为myobject的对象。要下载对象，需要提供存储桶名称和对象名称，并将结果作为InputStream对象返回。

5、列出对象

列出对象是从Minio对象存储中检索对象列表的一项基本操作。以下是使用Java语言列出对象的示例代码：

import io.minio.MinioClient;
import io.minio.Result;
import io.minio.errors.MinioException;
import io.minio.messages.Item;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // List objects
            String bucketName = "mybucket";
            Iterable<Result<Item>> results = minioClient.listObjects(bucketName);
            for (Result<Item> result : results) {
                Item item = result.get();
                System.out.println(item.objectName() + " " + item.size() + " " + item.lastModified());
            }
        } catch (MinioException e) {
            System.out.println("Error occurred: " + e);
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将从mybucket存储桶中列出所有对象。要列出对象，只需要提供存储桶名称即可。

6、删除对象

删除对象是从Minio对象存储中删除对象的一项基本操作。以下是使用Java语言删除对象的示例代码：

import io.minio.MinioClient;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Delete object
            String bucketName = "mybucket";
            String objectName = "myobject";
            minioClient.removeObject(bucketName, objectName);
            System.out.println("Object deleted successfully.");
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将从mybucket存储桶中删除名为myobject的对象。要删除对象，需要提供存储桶名称和对象名称。

7、使用Presigned URLs

Presigned URLs是一种允许有限时间内提供对Minio对象的受限访问的URL。以下是使用Java语言创建Presigned URLs的示例代码：

import io.minio.MinioClient;

import java.util.concurrent.TimeUnit;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Generate presigned URL
            String bucketName = "mybucket";
            String objectName = "myobject";
            int duration = 60; // Duration of the presigned URL in seconds
            String presignedUrl = minioClient.presignedGetObject(bucketName, objectName, duration, null, null, null, null);

            System.out.println("Presigned URL: " + presignedUrl);
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将生成一个允许60秒内访问名为myobject的对象的Presigned URL。要生成Presigned URL，需要提供存储桶名称、对象名称和Presigned URL的持续时间。

8、处理事件通知

Minio客户端库允许您使用事件通知机制监听与您的对象存储操作相关的事件。以下是使用Java语言处理事件通知的示例代码：

import io.minio.MinioClient;
import io.minio.ServerSideEncryption;
import io.minio.errors.MinioException;
import io.minio.messages.S3EventNotification;
import io.minio.notification.NotificationInfo;

public class MinioClientDemo {
    public static void main(String[] args) {
        try {
            // Initialize minio client
            MinioClient minioClient = new MinioClient("http://localhost:9000", "minioaccesskey", "miniosecretkey");

            // Listen for events
            String bucketName = "mybucket";
            minioClient.listenBucketNotification(bucketName, "", "", "", (info) -> {
                S3EventNotification notification = S3EventNotification.parseJson(info.records);
                for (S3EventNotification.S3EventNotificationRecord record : notification.getRecords()) {
                    System.out.println("Event type: " + record.getEventName());
                    System.out.println("Object key: " + record.getS3().getObject().getKey());
                }
            });
        } catch (MinioException e) {
            System.out.println("Error occurred: " + e);
        } catch (Exception e) {
            System.out.println("Error occurred: " + e.getMessage());
        }
    }
}

上述代码将监听与mybucket存储桶相关的所有事件通知。要处理事件通知，只需要提供存储桶名称即可。

四、Minio总结

Minio是一个非常有用的对象存储服务，它提供了很多方便的功能，可以帮助您轻松地存储和访问对象。上面介绍了Minio的基本概念、配置和使用，展示了如何使用Java语言来上传、下载、列出对象、删除对象、生成Presigned URLs和处理事件通知。虽然本文主要关注了Java语言，但是Minio客户端库也支持其他编程语言，例如Python、Go、JavaScript等。因此，如果您使用的是其他编程语言，也可以在Minio的官方文档中找到相应的示例代码。

总之，Minio提供了一个强大而灵活的对象存储服务，可以帮助您轻松地处理存储和访问对象的任务。无论是作为一个独立的对象存储服务，还是与其他云服务一起使用，Minio都是一个值得尝试的工具。

五、Minio和FastDFS的对比和优缺点

Minio和FastDFS都是开源的分布式对象存储系统，两者在存储方式、特点和适用场景等方面存在差异。下面对两者进行对比，以便更好地理解它们的优缺点和适用场景。

1、存储方式

Minio是一种基于S3协议的对象存储系统，它使用Amazon S3 API协议来提供高可用性和可扩展性，兼容S3 API的应用程序可以直接使用Minio进行对象存储操作。Minio使用Erasure Code来提供数据冗余，以确保数据的高可用性。

FastDFS是一种基于文件系统的对象存储系统，它使用文件系统的方式来存储对象，支持横向扩展和负载均衡，通过Tracker Server和Storage Server协同工作，提供高可用性和可靠性。

2、特点

Minio的特点包括：

  • 高可用性和可扩展性：支持多副本和分布式存储，可以轻松地扩展存储容量和吞吐量。
  • 兼容性：与Amazon S3兼容，可以无缝地与S3 API兼容的应用程序集成。
  • 安全性：支持SSL/TLS加密和Server-Side Encryption，确保数据的安全性。
  • 开源：Minio是一款开源的软件，可以自由获取和使用。

FastDFS的特点包括：

  • 简单易用：支持文件上传、下载和删除等基本操作，易于使用和管理。
  • 快速可靠：通过Tracker Server和Storage Server协同工作，提供高可用性和可靠性。
  • 高效节省：通过数据分片和负载均衡，实现高效的存储和访问，同时节省存储空间和带宽。

3、适用场景

Minio适用于需要高可用性和可扩展性的场景，特别是需要与S3 API兼容的应用程序。例如，Web应用程序、大数据分析、备份和归档等场景。

FastDFS适用于需要快速可靠的存储和访问的场景，特别是对于大文件的存储和传输。例如，视频、音频、图片等大文件存储和传输。

4、优缺点

Minio的优点包括：

  • 高可用性和可扩展性：支持多副本和分布式存储，可以轻松地扩展存储容量和吞吐量。
  • 兼容性：与Amazon S3兼容，可以无缝地与S3 API兼容的应用程序集成。
  • 安全性：支持SSL/TLS加密和Server-Side Encryption，确保数据的安全性。
  • 开源：Minio是一款开源的软件，可以自由获取和使用。

Minio的缺点包括：

  • 对象数量限制：由于Minio是一个基于S3协议的对象存储系统，它在存储大量小文件方面的表现可能不如FastDFS。
  • 复杂性：由于Minio的高可用性和可扩展性，它可能需要更多的配置和管理，需要更多的学习和技术支持。

FastDFS的优点包括：

  • 简单易用：支持文件上传、下载和删除等基本操作，易于使用和管理。
  • 快速可靠：通过Tracker Server和Storage Server协同工作，提供高可用性和可靠性。
  • 高效节省：通过数据分片和负载均衡，实现高效的存储和访问，同时节省存储空间和带宽。

FastDFS的缺点包括：

  • 不支持S3 API：FastDFS不支持S3 API，无法与S3 API兼容的应用程序集成。
  • 存储容量有限：FastDFS采用了传统的文件系统存储方式，可能无法满足高容量存储的需求。

综上所述，Minio和FastDFS都有各自的优缺点和适用场景。如果您需要高可用性和可扩展性，并且需要与S3 API兼容的应用程序集成，Minio可能是更好的选择。如果您需要快速可靠的存储和访问，特别是对于大文件的存储和传输，FastDFS可能更适合您的需求。

相关推荐

5分钟调色大片的方法（5分钟调色大片的方法有哪些）

哈喽大家好。在大家印象中一定觉得ps非常难学非常难。大家不要着急，小编的教学都是针对ps零基础的同学的，而且非常实用哦。只要大家跟着图文练习一两遍，保证大家立马学会~！好了，废话少说，下面开始我们今天...

闪白特效原来是这么用的（闪白特效怎么使用）

作者|高艳侠订阅|010-86092062闪白特效是影视作品中应用比较多的效果之一，那么具体该在哪些场景使用闪白特效？具体该如何操作？下面就以AdobePremiere（以下简称PR）为例，...

ppt常用小图标去哪里找?3个矢量素材网站推荐!

ppt是一个注重可视化表达的演示载体，除了高清图片，ppt中另一类常用的素材是各种小图标，也叫矢量图标，巧妙运用小图标能提升整体美观度和表现力，那么ppt常用小图标去哪里找呢？为方便各位快速找到合适的...

有什么好用的截图录屏工具?试试这9款

经常有朋友反馈苦于缺乏截屏和录屏的趁手工具，本期我们分享几个相当好用的截屏和录屏工具，希望能帮到大家。ScreenToGifScreenToGif是一款免费且开源的录屏工具。此款工具最大的特点是可以...

配色苦手福音!专业快速色环配色PS插件

今天橘子老师给的大家介绍的是一款快速配色的插件，非常强大配色苦手福音来啦！（获取方式见文末）【插件介绍】配色在后期设计中占有主导地位，好的配色能让作品更加抢眼Coolorus这款专业的配色插件，能够...

如何用PS抠主体?（ps怎么抠主体）

1.主体法抠图-抠花苞和花梗导入一张荷花苞的照片，点击上图中顶部“选择”菜单栏，下拉单击“主体”。可以看到，只有花苞被选中，但是花梗并没有被选中。接下来单击上图中左侧工具栏的“快速选择工具”，上图中顶...

2799元的4K电视，有保障吗?（买4k电视机哪个品牌好）

在上一期《电脑报》的3·15专题报道中，我们揭露了一款不靠谱的42英寸4K智能电视——TCLD42A561U。这款售价2699元的4K智能电视不仅4K画质方面存在严重问题，而且各种功能和应用体验也不理...

苹果电脑的Touch Bar推出一段时间了 这款工具可以帮你开发适用于它的APP

距离苹果推出带有TouchBar的MacBookPro已经有一段时间了，除了那些像Adobe、Google和Microsoft大公司在开发适用于TouchBar的应用之外，其实还有很多独立的开...

如魔法般吸取颜色的桌灯（如魔法般吸取颜色的桌灯叫什么）

色彩为生活带来的感官刺激，逐渐被视为理所当然。一盏桌灯运用它的神奇力量，将隐藏于物件中的颜色逐一释放，成为装点环境的空间魔法师。ColorUp是一款可以改变颜色的吸色台灯，沿用传统灯泡的造型，融入了拾...

一篇文章带你用jquery mobile设计颜色拾取器

【一、项目背景】现实生活中，我们经常会遇到配色的问题，这个时候去百度一下RGB表。而RGB表只提供相对于的颜色的RGB值而没有可以验证的模块。我们可以通过jquerymobile去设计颜色的拾取器...

ps拾色器快捷键是什么?（ps2019拾色器快捷键）

ps拾色器快捷键是什么?文章末尾有获取方式，按照以下步骤就能自动获得！学会制作PS特效需要一定程度的耐心和毅力。初学者可以从基本的工具和技术开始学习，逐渐提高他们的技能水平。同时，观看更多优秀的特效作...

免费开源的 Windows 截图录屏工具，支持 OCR 识别和滚动截图等

功能很强大、安装很小巧的免费截图、录屏工具，提供很多使用的工具来帮我么能解决问题，推荐给大家。关于ShareXShareX是一款免费的windows工具，起初是一个小巧的截图工具，经过多年的迭...

入门到精通系列PS教程:第13篇 · 拾色器、颜色问题说明及补充

入门到精通系列PS教程：第13篇·拾色器、颜色问题说明及补充作者|侯潇问题说明我的第12篇教程里，有个小问题没有说清楚。要说是错误，又不算是错误，只是没有说准确。写完那篇教程后，因为已经到了深...

PS冷知识:用吸管工具吸取屏幕上的任意颜色

今天，我们给大家介绍PS中的一个冷知识：用吸管工具可以吸取屏幕上的任意颜色。其实，操作起来是非常简单的。大多数情况下，我们认为，PS的吸管工具只能吸取PS软件作图区域范围内的颜色，最多加上画布四周的...

Windows 11 将提供内置颜色选择器工具

Windows11内置了颜色选择器，可以扫描并识别屏幕上的颜色并生成颜色代码。此外，微软还利用人工智能技术，让屏幕上的文本扫描和选择变得更加便捷。这两项功能均已在SnippingToolv1...

一周热门
最近发表
标签列表