多文件并发多线程MD5工具(相对快速的MD5一批文件),适配自定义MD5 Hash I/O缓存。

自己写的多文件 MD5校验工具,一个文件开一个线程,有最大I/O 缓存设置,兼容读写MD5后缀文件。

共计91个文件,合计180G左右 12分钟左右,UI基本卡废,但程序没蹦,属于正常。

卡的原因是基本是用 I/O 峰值了,我的是机器硬盘(峰值估计单文件在100M/S 上面,),然而我的单文件MD5 HASH缓存设置到了50M,也就是91*50M,完全超过硬件本身的硬件实力。

我也没有锁瓶颈,在配置里面设置,各位量力而行,找到合适自己计算机硬件最大合理的尺寸,就自己调节适配吧。或者您有更好自动化适配硬件的算法可以分享一下。

cs 复制代码
<?xml version="1.0" encoding="utf-8" ?>
<configuration>
  <appSettings>
    <!--默认MD5缓存大小-->
    <add key="MD5CacheSize" value="1"/>
    <!--最大MD5缓存大小,注意过大可能会导致I/O占用过高-->
    <add key="MaxMD5CacheSize" value="100"/>
  </appSettings>  
</configuration>
相关推荐
(initial)4 小时前
B-02. Shared Memory 深度优化:从 Bank Conflict 到 Tensor Core Swizzling
开发语言·c#
fdc201710 小时前
解耦的艺术:用责任链模式构建可插拔的文件处理流水线
c#·.net·责任链模式
bugcome_com11 小时前
【C# 数组详解】Array 定义、初始化、遍历、内存原理与面试高频问题
后端·c#·asp.net
小码编匠11 小时前
WPF 如何在 MVVM模式下实现 DataGrid编辑功能
后端·c#·.net
游乐码11 小时前
c#扩展方法
开发语言·c#
qq_4542450313 小时前
基于ECS的工作流编排框架
数据结构·c#
qq_454245031 天前
BuildTemplateGraph 函数深度解析:动态节点图构建的架构设计与核心价值
数据结构·c#
qq_454245031 天前
SkeletonFlow:基于组合子逻辑与范畴论的数据流处理框架
数据结构·c#
游乐码1 天前
c#静态类和静态构造函数
开发语言·c#
net3m331 天前
自动分工 现象时,一共有几种可能得权重组合变化,如何确保这些组合的扫描时的不发生组合爆炸
人工智能·c#·ai编程