存储

【SGL】Scatter-Gather List内存传输技术sgl（Scatter-Gather List）内存传输技术，是一种高效管理非连续内存数据传输的方法。核心思想：通过一个链表或数组描述多个分散的内存块，使得硬件可以一次性完成对这些非连续内存区域的读写操作，无需CPU介入数据拷贝。

C# 实现列式存储数据列式存储(Columnar Storage)是一种数据存储方式，它将数据按列而非行组织。与传统的行式存储相比，列式存储在以下场景具有优势：

天翼云开发者社区

教育考试院存储系统焕新：轻量升级，无缝切换！数字时代，数据已成为各单位的核心资产，教育领域也不例外。某教育考试院承载着数据归集、监控视频存储和实时监控管理的重要任务。随着数据量增长，该教育考试院原多台单点部署的存储服务器已无法满足业务需求，多个痛点显现：若任意服务器发生故障，业务会面临中断风险；新增服务器反而会放大单点故障风险；数据读写量持续增长导致性能瓶颈日益突出。

阿里云Clickhouse 冷热数据分层存储实战记录某业务Clickhouse库月数据增长超过2.5T，云上Clickhouse容量并不是无限的，单节点有32T上限，而业务已使用一半以上，依此速度，半年内就将达到上限。

唐宋元明清2188

网络虚拟存储 Iscsi实现方案网络虚拟存储，通过Iscsi协议可以实现本地挂载磁盘，扩展本机设备存储。Iscsi有以下实现方案，简单介绍下：

阿里云对象存储服务阿里云对象存储服务（OSS，Object Storage Service）是一种高度可扩展、低成本、安全可靠的云存储服务，主要用于存储和管理海量的非结构化数据。它可以帮助用户实现数据的安全存储、快速访问和高效管理。OSS 广泛应用于图片、音频、视频、备份、日志、网站静态资源等各类数据存储场景。

腾讯云对象存储服务（COS）安全、可扩展、低成本的云存储解决方案腾讯云对象存储服务（COS，Cloud Object Storage）是一种高可靠、高性能、可扩展的云存储服务，专为海量非结构化数据（如图片、视频、文档、日志等）存储和管理而设计。COS不仅提供可靠的数据存储解决方案，还能够帮助用户降低成本、提升存储管理效率，广泛应用于各行业的数据存储、备份、共享等场景。

腾讯云轻量云对象存储腾讯云轻量云对象存储（COS）是一款为中小企业、开发者及个人用户提供的简化、低成本、易用的云存储服务。它提供高效、灵活的对象存储解决方案，用户可以通过腾讯云轻量云对象存储轻松存储、管理和访问海量非结构化数据。通过简单的操作，用户无需担心底层存储和基础设施，快速实现高可用的数据存储和内容分发。

强壮的派大星

gdfs: 基于Fuse的GoogleDrive客户端开源代码分析在学习fuse的过程中，首先从libfuse中的demo开始学习，以了解用户态与内核态通信的框架。而此处的demo只聚焦于最基本的通信，用户态文件系统的实现只是一个最简单的read only文件系统，其他操作都是假接口。要继续深入学习，直接看cephfs等高集成、高完善的代码容易被细节淹没，最好能够循序渐进，同时也可以横向对比，看各个实现解决了什么问题，如何在用户态组织文件索引，缓存如何实现，客户端与服务端的缓存一致性如何解决，分布式锁如何实现，实现方式是否优雅，哪里有需要完善的地方等。找到一个基于f

AWS官方合作商

AWS S3深度解析：十大核心应用场景与高可用架构设计实践摘要：作为全球领先的对象存储服务，Amazon S3凭借其高扩展性、持久性和安全性，已成为企业云原生架构的核心组件。本文将深入探讨S3的典型技术场景，并揭秘其背后的架构设计逻辑。

唐宋元明清2188

Windows 网络存储ISCSI本文介绍网络存储ISCSI的主要知识点以及如何通过代码控制挂载。Windows网络存储有很多协议，我目前学习、稍微有了解的是FTP、SMB、ISCSI，FTP、SMB类似可以用来添加共享文件夹，或者添加映射网络驱动器：

唐宋元明清2188

Windows 本地虚拟磁盘主要参数：挂载之后，可以通过list vdisk以及list disk查看列表情况：这里我们是直接创建主分区，还有其efi、msr等：

[250125] DeepSeek 发布开源大模型 R1，性能比肩 OpenAI o1 | 希捷推出高达 36TB 的硬盘DeepSeek 正式发布了 DeepSeek-R1 大模型，并同步开源了模型权重，其性能对标 OpenAI o1 正式版。

腾科张老师

什么是Ceph？它的技术特点是什么？部署挑战及解决方案如何？Ceph是一个开源的分布式存储系统，旨在为现代数据中心提供高度可扩展的统一存储解决方案。Ceph通过整合对象存储、块存储和文件系统，构建了一个灵活的存储平台，能够应对不断增长的海量数据需求。Ceph以其高性能、高可靠性和高可用性闻名，利用智能算法使数据在分布式集群中自动均衡分布，无需人为干预。它还通过完全去中心化的架构，消除了传统存储中的单点故障，提供了出色的扩展性和自我修复能力。

flink sink doris接上文：一文说清flink从编码到部署上线网上关于flink sink drois的例子较多，大部分不太全面，故本文详细说明，且提供完整代码。

K8S中的PV、PVC介绍和使用persistent volumes持久卷，独立的存储资源，实现K8S持久化存储。可以由外部存储系统（如 NFS、GlusterFS、AWS EBS 等）支持。PV可以限制资源的大小和容器

鹏大师运维

聊聊开源的虚拟化平台--PVE原文链接：聊聊开源的虚拟化平台–PVE PVE（Proxmox Virtual Environment）是一种开源的虚拟化平台，支持容器化（LXC）和虚拟机（KVM），可用于创建和管理虚拟化环境。它基于Debian，并提供了一个Web界面，使得用户能够方便地管理虚拟机、容器、存储和网络等资源。PVE适用于个人用户、小型企业或大型企业，支持高可用性、集群管理、存储集成和备份等功能。

Android 10、11、12存储适配相关AndroidQ(10)分区存储完美适配 - 简书前言最近时间在做AndroidQ的适配，截止到今天AndroidQ分区存储适配完成，期间出现很多坑，目前网上的帖子大部分都是概述变更内容，接下来的几篇帖子都是对分区存储实际...https://www.jianshu.com/p/271bbd13bfcf拖不得了，Android11真的要来了，最全适配实践指南奉上https://juejin.cn/post/6860370635664261128android11 申请所有文件访问权限_tools:ign

ceph的存储池管理注：在18.2.4版本中，创建存储池若不指定pg默认数量为32个1.创建存储池2.创建存储池时可以指定pg数量，一般情况下，pg和pgp数量一致。

ceph的集群管理在上一篇文章中，已经成功地初始化了一个ceph管理节点ceph141。接下来要做的是把ceph142、ceph143节点给添加到集群。