分布式文件存储系统Minio,tuling,fox,p2完成
创始人
2024-04-19 11:23:31
0次
一 分布式文件系统应用场景
- fastDFS
- 缺点:
- 部署麻烦。
- 因为文件名是自动生成的,所以如果要处理文件的话,还要经过额外的编码。
- Minio介绍
- 应用场景
- 互联网海量非结构化数据的存储需求,如 电商网站:海量商品图片 视频网站:海量视频文件 网盘 : 海量文件 社交网站:海量图片
- 对于中小型企业,如果不选择存储上云,那么 Minio 是个不错的选择,麻雀虽小,五脏俱全。当然 Minio 除了直接作为对象存储使用,还可以作为云上对象存储服务的网关层,无缝对接到 Amazon S3、 MicroSoft Azure。
- 非结构化数据与结构化数据
- 非结构化数据:文件、音频、视频、图片
- 结构化数据:如常见的关系型数据库(mysql、oracle、sqlserver)用表存储某个网站的会员信息。
- minio是什么?
- MinIO 是一个基于Apache License v2.0开源协议的对象存储服务。
- 对象存储服务(Object Storage Service,OSS)是一种海量、安全、低成本、高可靠的云存储服 务,适合存放任意类型的文件。容量和处理能力弹性扩展,多种存储类型供选择,全面优化存储成 本。
- Minio是使用go语言编写的,天然支持跨平台。
- minio的优点
- 部署简单: 一个single二进制文件即是一切,还可支持各种平台。
- minio支持海量存储,可按zone扩展(原zone不受任何影响),支持单个对象最大5TB;
- 兼容Amazon S3接口,充分考虑开发人员的需求和体验;
- 低冗余且磁盘损坏高容忍,标准且最高的数据冗余系数为2(即存储一个1M的数据对象,实际占用 磁盘空间为2M)。但在任意n/2块disk损坏的情况下依然可以读出数据(n为一个纠删码集合(Erasure Coding Set)中的disk数量)。并且这种损坏恢复是基于单个对象的,而不是基于整个存储卷的。
- 读写性能优异
- MinIO的基础概念
- Object:一个文件 / 视频 / 音频 / 字节流 / Anything......
- Bucket:翻译过来是桶,可理解为一个顶层的目录(文件夹)。Bucket是用来装Object的。
- Drive:即存储数据的磁盘。
- Set :分布式集群场景或多磁盘场景下。一组Drive的集合。
- 纠删码EC(Erasure Code):备份与恢复
- 存储形式
- 存储方案
二 Minio环境搭建
- 单机部署
- 分布式集群部署
- Minio客户端使用
三 Minio Java Client使用
- 文件上传
- 文件下载
- Spring boot整合minio
四 Minio控制台使用详解
相关内容