分布式存储

Java 大视界 -- 基于 Java 的大数据分布式存储在工业互联网海量设备数据长期存储中的应用优化（248）《大数据新视界》和《 Java 大视界》专栏：《大数据新视界》和《 Java 大视界》专栏：💖亲爱的朋友们，热烈欢迎来到青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而我的博客正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程！💖

Java 大视界 -- 基于 Java 的大数据分布式存储系统的数据备份与恢复策略（139）💖亲爱的朋友们，热烈欢迎来到青云交的博客！能与诸位在此相逢，我倍感荣幸。在这飞速更迭的时代，我们都渴望一方心灵净土，而我的博客正是这样温暖的所在。这里为你呈上趣味与实用兼具的知识，也期待你毫无保留地分享独特见解，愿我们于此携手成长，共赴新程！💖

数智百问 | 制造企业如何降低产线检测数据的存储和管理成本？在《“十四五”智能制造发展规划》等政策的推动下，以及新能源汽车、消费电子等品牌商对产品质量和供应商智能化水平要求的提升，半导体、电子制造、动力电池等先进制造行业企业纷纷推进产线智能化升级，并投入大量机器视觉检测设备以实现自动化检测。这些设备会产生海量的质检图片、日志等非结构化数据，为了满足下游客户的质量追溯要求以及遵循国家相关质量控制行业标准，企业需要对全过程质检数据进行长期保存。

ceph 16.2.15(Pacific)编译以下流程在ubuntu22.04 和 openEuler20.03 都实际操作过从https://docs.ceph.com/en/latest/releases/找到pacific版本对应的tag为16.2.15

SmartX分享：SMTX ZBS 中 RDMA 技术简介我们清楚，分布式存储将利用网络作不同设备的互联。最基础的如TCP/IP的IP SAN，进阶的有FC SAN、IB等等。 SmartX 支持 10G以上的TCP/IP网络作为互联网络，同时也支持25G的RDMA网络。

ceph的存储池管理注：在18.2.4版本中，创建存储池若不指定pg默认数量为32个1.创建存储池2.创建存储池时可以指定pg数量，一般情况下，pg和pgp数量一致。

OceanBase数据库结合ETLCloud快速实现数据集成随着信息技术的迅猛发展和数据量的急剧增加，企业面临着前所未有的数据管理挑战。传统的数据库系统在处理大规模、多样化的数据时往往显得力不从心。因此，分布式数据库应运而生，以其优越的性能和扩展性逐渐成为新一代数据存储解决方案。在众多分布式数据库中，OceanBase凭借其高可用、易扩展的特点，正在受到越来越多企业的青睐。

minio 快速入门+单机部署+集群目录原理概念名词解释Set /Drive 的关系MinIO部署单机单机单盘单机多盘集群多机单盘多机多盘

志凌海纳SmartX

《SmartX ELF 虚拟化核心功能集》发布，详解 80+ 功能特性和 6 例金融实践《SmartX ELF 虚拟化核心功能集》电子书现已发布！本书详细介绍了 SmartX ELF 虚拟化及云平台核心功能，包含虚机服务、容器服务、网络服务、存储服务、运维管理、工具服务、数据保护等各个方面。

【隐私计算篇】利用多方安全计算MPC实现VGG16人脸识别隐私计算模型本文主要介绍一种利用多方安全计算MPC技术，实现VGG16的人脸识别模型，侧重于模型推理阶段，此工作是多年前完成的，目前已经公开专利，其中涉及到最小化多方安全计算(MPC)以及明密文混合计算的思想，仅供参考。

006.MinIO基础使用图形界面创建bucket。特性：Versioning 开启版本控制，开启版本控制则允许在同一键下保持同一对象的多个版本。

【初出江湖】分布式之什么是分布式存储？分布式存储是一种将数据分散存储在多个节点上的存储方式。与传统的集中式存储相比，分布式存储将数据分布在多个节点上，每个节点都可以独立地存储和访问数据。这种分布式的存储方式可以提供更高的可靠性、可扩展性和性能。

005.MinIO-DirectPV分布式多租户存储部署本实验结合Kubernetes进行MinIO部署，实现MinIO于Kubernetes的融合。minio官方支持通过简单的快速部署，以便于进行基础测试：

004.MinIO-DirectPV分布式存储部署Kubernetes hostpath、local和本地静态配置都存在需要事先在node节点准备好可用的块存储或文件系统，例如对插入的硬盘，或者磁盘阵列做分区格式化，文件系统则需提前创建好Kubernetes即将利用的挂载目录，并且两种方法都会有亲和性限制，无法做到让Kubernetes自身的去调度让数据卷分布在不同的node节点上。

使用Pinata在IPFS上存储NFT图片的实践随着区块链技术的快速发展，NFT（非同质化代币）在数字艺术、游戏和收藏品等领域变得越来越流行。一个关键的问题是如何安全、高效地存储这些NFT的元数据和图片。IPFS（InterPlanetary File System，星际文件系统）提供了一种分布式存储解决方案，能够有效解决这一问题。本文将介绍IPFS及其在NFT存储中的应用，并具体讲解如何使用Pinata平台🚪在IPFS上存储图片。

架构面试-分布式存储系统edits_log分段加锁与锁优化在多线程编程中，volatile关键字是一个非常重要的概念，用于保证变量的可见性，即当一个线程修改了volatile变量的值，其他线程能够立即看到这个变化。这种特性对于实现无锁编程、轻量级的同步机制和高效的并发控制特别有用。下面是一些适合使用volatile的典型场景，特别是在标志位修改等需要可见性的场合。

cah黎明就在眼前

java语言操控minio实现文件的版本管理（基于springboot项目）minio是一款分布式的对象存储服务，本文主要介绍通过springboot项目实现对minio存储系统中文件的版本管理。minio存储服务中可以手动开启版本管理的功能，开启版本管理后每个文件的变更都会生成一个新的版本，包括文件的第一次上传、文件的覆盖以及文件的删除等，每个版本都会有一个版本编号versionId，后续都会根据每个文件的各个版本编号进行版本管理。

程序员老舅

分布式存储 Ceph 的演进经验从 2004 年到今天，Ceph 的存储后端一直都在演变，从最开始基于 B 树的 EBOFS 演变到今天的 BlueStore，存储后端已经变得非常成熟，新的存储系统不仅能够提供良好的性能，还有着优异的兼容性。我们在这篇文章中将要简单介绍分布式存储 Ceph 的架构以及演进过程中遇到的挑战。

大道云行TaoCloud

赋能中国制造，大道云行发布智能制造分布式存储解决方案《中国制造2025》指出，“制造业是国民经济的主体，是立国之本、兴国之器、强国之基。”智能制造是一种利用先进的信息技术、自动化技术和智能技术来优化和升级制造业生产过程的方法。它将人工智能、大数据、物联网、机器学习等先进技术应用于制造业，以提高生产效率、降低成本、改善产品质量和推动制造业的转型升级。

MinIO官方账号

复制策略深入探讨在之前的博客中，我们讨论了复制最佳实践和不同类型的复制，例如批量、站点和存储桶。但是，随着所有这些不同类型的复制类型的出现，人们不得不想知道在哪里使用哪种复制策略？从现有 S3 兼容数据存储迁移数据时，您使用 mc mirror 还是 Batch？在集群之间进行复制时，应该使用站点复制还是存储桶复制？