分布式文件存储系统minio了解下

什么是minio

minio 是一个基于 Apache License v2.0 开源协议的对象存储服务。非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小。 是一种海量、安全、低成本、高可靠的云存储服务,适合存放任意类型的文件。容量和处理能力弹性扩展,多种存储类型供选择,全面优化存储成本。

如果不考虑文件存储上云,minio 是一个非常不错的选择,并且支持分布式部署。

如何使用 minio 进行文件上传

xml 复制代码
// 引入mioio的依赖包
 <!-- minio -->
        <dependency>
            <groupId>io.minio</groupId>
            <artifactId>minio</artifactId>
            <version>7.1.4</version>
        </dependency>
java 复制代码
// controller层
@PostMapping(value = "/uploadFile", headers = "content-type=multipart/form-data")
public Response<List<FileReturn>> uploadFiles(List<MultipartFile> fileList) {
        return fileService.uploadFileList(fileList);
    }
java 复制代码
// service层 --- 伪代码
public List<FileReturn> uploadFileList(List<MultipartFile> fileList) {
        // 参数校验
        if (CollectionUtils.isEmpty(fileList)) {
            // throw new Exception
        }

        List<FileVO> fileVOList = new ArrayList<>();
        List<FileReturn> fileReturnList = new ArrayList<>();
        // String userId = xxxx;
        for (MultipartFile file : fileList) {
            // 校验文件 todo

            // 开始上传
            try {
                // 将文件存入minio
                Map<String, String> fileMap = minioClient.putObject(file);
                // 创建文件对象,设置属性
                FileVO fileVO = new FileVO()
                        .init(userId)
                        .setFileType(suffix)
                        .setFileOldName(Base64.decodeStr(fileMap.get(FileModel.OLD_NAME), "UTF-8"))
                        .setFileName(fileMap.get(FileModel.NAME))
                        .setFilePath(fileMap.get(FileModel.NAME))
                        .setFileNetPath(fileMap.get(FileModel.URL))
                        .setFileSize(new BigDecimal(fileMap.get(FileModel.SIZE)))
                        .setFileUploadUser(userId)
                        .setFileUploadTime(LocalDateTime.now());
                fileVO.setId(IdWorker.getId());
                fileVOList.add(fileVO);

                // 返回文件id,文件url,文件名
                FileReturn fileReturn = new FileReturn().setFileId(fileVO.getId()).setFileNetPath(fileVO.getFileNetPath()).setFileAbsolutePath(this.preview(fileVO.getFileNetPath())).setFileOldName(fileVO.getFileOldName());
                fileReturnList.add(fileReturn);

            } catch (Exception e) {
                // 删除minio中已经保存的文件
                if (fileReturnList.size() > 0) {
                    fileReturnList.forEach(vo -> minioClient.removeObject(vo.getFileNetPath()));
                }
                log.info("上传文件异常", e);
                // throw new Exception
            }
        }
        // 保存附件信息到数据库 持久化
        mapper.saveList(fileVOList);
        return fileReturnList;
    }

文件下载

java 复制代码
// service层
// 文件下载前端传入文件id --- 伪代码
 public void downloadFile(String fileId, HttpServletResponse response) {
        FileVO contractFile = mapper.selectById(fileId);
        if (!Objects.isNull(contractFile)) {
            try {
                response.setHeader("Content-Disposition", "attachment;filename=" + contractFile.getFileName());
                minioClient.getObject(contractFile.getFilePath(), response.getOutputStream());
                // 持久化:记录下载次数,根据业务来处理
                // ...
            } catch (IOException e) {
                throw new RuntimeException(e);
            }
        }
    }

文件删除

java 复制代码
// service层 --- 伪代码
public String removeFile(String fileId, HttpServletResponse response) {
        FileVO contractFile = mapper.selectById(fileId);
        if (!Objects.isNull(contractFile)) {
            try {
                response.setHeader("Content-Disposition", "attachment;filename=" + contractFile.getFileName());
                // 删除minio文件
                minioClient.removeFile(contractFile.getFilePath());
                // 删除数据库文件 持久化操作
                // ...
            } catch (IOException e) {
                // return "删除失败";
            }
        }
        return "删除成功";
    }

文件预览

java 复制代码
// service层 --- 伪代码
// 返回文件的url全路径即可
 public String preview(String filePath) {
        String url = "";
        if (StringUtils.isNotEmpty(filePath)) {
            int index = filePath.indexOf('/');
            String objectName = filePath.substring(index + 1);
            url = minioClient.getObjectUrl(objectName, 24 * 3600, Method.GET);
        }
        return url;
    }

 public String getObjectUrl(String objectName, Integer expires, Method method) {
        try {
            if (expires >= 1 && expires <= 604800) {
                if (method == null) {
                    method = Method.GET;
                }
                return minioClient.getPresignedObjectUrl((GetPresignedObjectUrlArgs)((io.minio.GetPresignedObjectUrlArgs.Builder)((io.minio.GetPresignedObjectUrlArgs.Builder)GetPresignedObjectUrlArgs.builder().method(method).bucket(minioConfig.getBucket())).object(objectName)).expiry(expires, TimeUnit.SECONDS).build());
            } else {
                throw new InvalidExpiresRangeException(expires, "expires must be in range of 1 to 604800");
            }
        } catch (Throwable var6) {
            throw new BusinessException(FILE_LOAD_EXCEPTION.getCode(), FILE_LOAD_EXCEPTION.getMessage(), var6.getMessage());
        }
    }
相关推荐
云和数据.ChenGuang21 分钟前
Django 应用安装脚本 – 如何将应用添加到 INSTALLED_APPS 设置中 原创
数据库·django·sqlite
woshilys1 小时前
sql server 查询对象的修改时间
运维·数据库·sqlserver
Hacker_LaoYi1 小时前
SQL注入的那些面试题总结
数据库·sql
建投数据2 小时前
建投数据与腾讯云数据库TDSQL完成产品兼容性互认证
数据库·腾讯云
xlsw_2 小时前
java全栈day20--Web后端实战(Mybatis基础2)
java·开发语言·mybatis
Hacker_LaoYi3 小时前
【渗透技术总结】SQL手工注入总结
数据库·sql
岁月变迁呀3 小时前
Redis梳理
数据库·redis·缓存
独行soc3 小时前
#渗透测试#漏洞挖掘#红蓝攻防#护网#sql注入介绍06-基于子查询的SQL注入(Subquery-Based SQL Injection)
数据库·sql·安全·web安全·漏洞挖掘·hw
神仙别闹3 小时前
基于java的改良版超级玛丽小游戏
java
你的微笑,乱了夏天3 小时前
linux centos 7 安装 mongodb7
数据库·mongodb