对象存储

分布式存储与RustFS6 天前
wpf·文件系统·milvus·对象存储·minio·rustfs·vibe
告别复杂配置:用Milvus、RustFS和Vibe Coding,60分钟DIY专属Chatbot作为一名全栈工程师,我一直在寻找更高效的方式构建智能应用。本文将分享如何利用 Milvus、RustFS 和 Vibe Coding 技术组合,在短时间内打造一个具备长期记忆能力的对话机器人。
分布式存储与RustFS9 天前
云原生·wpf·文件系统·terraform·对象存储·minio·rustfs
告别手动配置:用 Terraform 定义你的 RustFS 存储帝国在当今云原生时代,手动配置存储资源已成为制约运维效率的主要瓶颈。本文将带你领略 Terraform 与 RustFS 的强大组合,教你如何通过代码定义和管理分布式存储基础设施,实现真正意义上的 基础设施即代码(IaC)。
SirLancelot115 天前
后端·云原生·中间件·容器·aws·对象存储·minio
MinIO-基本介绍(一)基本概念、特点、适用场景高性能对象存储兼容Amazon S3云原生友好纠删码技术简单轻量级强大的安全特性功能范围限于对象存储元数据搜索能力有限
分布式存储与RustFS24 天前
开源软件·文件系统·对象存储·minio·aws s3·seaweedfs·rustfs
RustFS与其他新兴存储系统(如SeaweedFS)相比有哪些优势和劣势?RustFS 和 SeaweedFS 都是性能出色的分布式存储系统,但它们在设计理念、技术实现和适用场景上有着显著不同。为了帮大家更直观地理解,我用一个表格汇总它们的核心差异。
喂完待续1 个月前
大数据·云原生·架构·big data·对象存储·amazon s3·序列晋升
【Big Data】Amazon S3 专为从任何位置检索任意数量的数据而构建的对象存储一、Amazon S3的基本定义与核心概念二、Amazon S3的诞生背景与历史发展三、Amazon S3的架构设计与技术实现
荔枝吻3 个月前
对象存储·rustfs
【前沿技术动态】【AI总结】RustFS:从 0 到 1 打造下一代分布式对象存储关键词:RustFS、对象存储、S3 兼容、Rust、分布式、性能、云原生AI:Kimi过去十年,对象存储领域似乎“尘埃落定”:
PatrickYao04226 个月前
运维·服务器·对象存储·minio·s3
在服务器上部署MinIO Server高性能:MinIO号称是目前速度最快的对象存储服务器,据称在标准硬件上,对象存储的读/写速度最高可以高达183 GB/s和171 GB/s,可惜我的磁盘跟不上
wengad8 个月前
对象存储·基础设施
单机上使用docker搭建minio集群如果你还没有安装Docker和Docker Compose,请先进行安装。创建一个minio目录,在目录下创建docker-compose.yml,将如下内容拷贝到文件中:
AWS官方合作商8 个月前
云计算·aws·数据湖·对象存储·存储·s3
AWS S3深度解析:十大核心应用场景与高可用架构设计实践摘要:作为全球领先的对象存储服务,Amazon S3凭借其高扩展性、持久性和安全性,已成为企业云原生架构的核心组件。本文将深入探讨S3的典型技术场景,并揭秘其背后的架构设计逻辑。
非凡的世界9 个月前
开发语言·php·对象存储·亚马逊云
如何使用 PHP 操作亚马逊 S3 对象云存储以下是使用PHP与亚马逊S3对象云存储(也有其他支持S3协议的云存储服务,原理类似)进行交互的常见文档接口使用示例,涵盖了基本的操作如上传文件、下载文件、删除文件、列举文件等内容。
牛马程序员‍9 个月前
java·对象存储·minio·oss
Day97 minioMinio 是个基于 Golang 编写的开源对象存储套件,虽然轻量,可以很简单的和其他应用的结合;是目前非常流行的分布式对象存储系统(OSS)
high20119 个月前
java·ide·eclipse·对象存储·amazon s3
【对象存储】-- s3:\\、s3n:\\、s3a:\\ 简介目录1. s3:\2. s3n:\3. s3a:\区别对比总结在 Hadoop 和大数据处理领域,s3:\\、s3n:\\ 和 s3a:\\ 是访问 Amazon S3 的不同文件系统实现方式。以下是它们的简要介绍、区别及应用场景:
gs801409 个月前
机器学习·云原生·对象存储·大数据分析·分布式文件系统·juicefs·高性能存储
JuiceFS 详解:一款为云原生设计的高性能分布式文件系统JuiceFS 详解:一款为云原生设计的高性能分布式文件系统JuiceFS(Juiced File System)是一款高性能、POSIX 兼容的云原生分布式文件系统。它采用对象存储作为底层存储,支持多种元数据引擎,如 Redis、MySQL、PostgreSQL 等,通过强大的缓存机制提供快速的数据访问,具有极高的可靠性、弹性和成本效益,广泛应用于大数据分析、机器学习、容器化应用等场景。
神技圈子10 个月前
大数据·golang·对象存储
源码讲解MinIO 如何分布数据在分布式存储中,数据通常通过一定的算法分布到多个节点(服务器)或盘(磁盘)上。MinIO 采用 Erasure Coding(纠删码) 和 分桶(bucket) 的方式,结合哈希算法对数据进行分布,以实现高效的数据存储和访问。
云存储小天使10 个月前
对象存储·多az存储
数据持久性是如何炼成的——对象存储容灾技术解析存储系统作为支撑人工智能发展的关键基础设施,不仅需要提供弹性、海量数据存储能力,还要保证数据的安全性和可靠性,以确保业务的核心数据资产得以持久存储,大模型时代对海量数据的安全可靠存储提出了更高的要求。 对象存储具有优秀的成本效益,丰富和卓越的数据安全保障措施,是构建云上企业级存储设施的首要选择。面对更高的数据安全要求,对象存储也提供了版本控制、跨地域复制、多AZ等多种数据容灾手段,帮助企业更好地保护和管理其数据资产。尤其是多AZ技术,能够将客户数据分散存储在城市中多个不同的数据中心,当某个数据中心因自然灾
运维小文10 个月前
ceph·云原生·容器·kubernetes·对象存储·cephfs
cephFS的使用以及K8S对接cephFS1.创建两个存储池分别用于存储mds的元数据和数据2.创建一个文件系统,名称为"zhiyong18-cephfs"
运维小文10 个月前
ceph·云原生·对象存储·存储·分布式存储·cephfs
ceph的存储池管理注:在18.2.4版本中,创建存储池若不指定pg默认数量为32个1.创建存储池2.创建存储池时可以指定pg数量 ,一般情况下,pg和pgp数量一致。
运维小文1 年前
ceph·对象存储·cephfs·ceph用户管理·cephx
ceph的用户管理和cephx认证参考链接:权限:https://docs.ceph.com/en/latest/rados/operations/user-management/#authorization-capabilities 用户:https://docs.ceph.com/en/reef/rados/operations/user-management/
运维小文1 年前
ceph·对象存储·存储·ceph集群管理·ceph节点管理
ceph的集群管理在上一篇文章中,已经成功地初始化了一个ceph管理节点ceph141。接下来要做的是把ceph142、ceph143节点给添加到集群。
Ciderw1 年前
网络·数据库·nvme·对象存储·存储·块存储·文件存储
块存储、文件存储和对象存储详细介绍块存储:像跑车,因为它们都能提供快速的响应和高性能,适合需要即时数据访问的场景,比如数据库和虚拟化技术。 文件存储:像货车,因为它们都能承载大量货物(文件)并沿固定路线(文件系统结构)运输,适合文件共享和多用户协作环境。 对象存储:像轮船,因为它们都能在广阔的海域(互联网)中自由航行(存储大规模数据),适合不经常访问的大型数据备份和归档。