多文件并发多线程MD5工具(相对快速的MD5一批文件),适配自定义MD5 Hash I/O缓存。

自己写的多文件 MD5校验工具,一个文件开一个线程,有最大I/O 缓存设置,兼容读写MD5后缀文件。

共计91个文件,合计180G左右 12分钟左右,UI基本卡废,但程序没蹦,属于正常。

卡的原因是基本是用 I/O 峰值了,我的是机器硬盘(峰值估计单文件在100M/S 上面,),然而我的单文件MD5 HASH缓存设置到了50M,也就是91*50M,完全超过硬件本身的硬件实力。

我也没有锁瓶颈,在配置里面设置,各位量力而行,找到合适自己计算机硬件最大合理的尺寸,就自己调节适配吧。或者您有更好自动化适配硬件的算法可以分享一下。

cs 复制代码
<?xml version="1.0" encoding="utf-8" ?>
<configuration>
  <appSettings>
    <!--默认MD5缓存大小-->
    <add key="MD5CacheSize" value="1"/>
    <!--最大MD5缓存大小,注意过大可能会导致I/O占用过高-->
    <add key="MaxMD5CacheSize" value="100"/>
  </appSettings>  
</configuration>
相关推荐
曹牧4 小时前
C#:主线程能够捕获到子线程中的异常
开发语言·数据库·c#
jiayong2311 小时前
海量数据处理技术方案与实现原理
大数据·c#·linq
z落落15 小时前
C# 类与对象、字段、静态与非静态+四大访问修饰符
开发语言·c#
魔法阵维护师15 小时前
从零开发游戏需要学习的c#模块,第三十二章(Boss 战系统)
学习·游戏·c#
魔法阵维护师16 小时前
从零开发游戏需要学习的c#模块,第三十三章(暂停菜单)
学习·游戏·c#
z落落16 小时前
C# Stack栈 / Queue队列+所有集合 终极一页汇总(全覆盖、零遗漏)
java·开发语言·c#
淡海水17 小时前
08-认知篇-对比-injectfix深度解析
unity·c#·热更新·clr·hybrid·injectfix
周杰伦fans1 天前
C# 踩坑 CS8370:Switch Expression 在 C# 7.3 不可用及三种解决方案
c#
z落落1 天前
C# ToCharArray + foreach遍历 + String与StringBuilder
开发语言·c#