C#,Parallel并行多线程计算,使用专门的Concurrent系列数据集

常规的 Hashtable 在并行计算时,会出现冲突错误!

Concurrent*** 是适合于并行计算的数据集系列

https://learn.microsoft.com/zh-cn/dotnet/api/system.collections.concurrent?view=net-9.0

提供多个线程安全的集合类,这些类应在多个线程同时访问集合时代替 System.CollectionsSystem.Collections.Generic 命名空间中的相应类型。

但是,不保证通过扩展方法或通过显式接口实现访问集合对象的元素是线程安全的,并且可能需要由调用方同步。

|-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
| BlockingCollection<T> | 为实现 IProducerConsumerCollection<T>的线程安全集合提供阻塞和边界功能。 |
| ConcurrentBag<T> | 表示对象的线程安全无序集合。 |
| ConcurrentDictionary<TKey,TValue> | 表示可同时由多个线程访问的键/值对的线程安全集合。 |
| ConcurrentQueue<T> | 表示线程安全的先出 (FIFO) 集合。 |
| ConcurrentStack<T> | 表示线程安全最后一次传入 (LIFO) 集合。 |
| OrderablePartitioner<TSource> | 表示将可排序数据源拆分为多个分区的特定方式。 |
| Partitioner | 为数组、列表和可枚举提供常见的分区策略。 |
| Partitioner<TSource> | 表示将数据源拆分为多个分区的特定方式。 |

cs 复制代码
ConcurrentDictionary<string, int>[] hash = new ConcurrentDictionary<string, int>[N];
for (int i = 0; i < N; i++) hash[i] = new ConcurrentDictionary<string, int>();
// 并行计算方法
Parallel.For(0, records.Count, i =>
{
    EMRRecord emr = records[i];
    EMRInfo eri = new EMRInfo();
    eri.split_to_chapters(emr);
    foreach (EMRChapter ch in eri.chapters)
    {
        int div = division_by_name(ch.name);
        if (div < 0) continue;
        if (div >= N) continue;
        for (int j = 0; j < ch.content.Length; j++)
        {
            string s1 = ch.content.Substring(j, 1);
            if (Char.IsLetter(s1[0]) || StringHelper.IsChinese(s1))
            {
                if (!hash[div].ContainsKey(s1))
                {
                    hash[div].TryAdd(s1, 1);
                }
                else
                {
                    hash[div][s1] = (int)hash[div][s1] + 1;
                }
            }
        }
    }
});
相关推荐
bugcome_com10 分钟前
C# 进阶核心知识点汇总|多项目开发 + 委托 + Lambda + 事件一次吃透
c#
热爱编程的小刘23 分钟前
Lesson05&6 --- C&C++内存管理&模板初阶
开发语言·c++
qq_12498707531 小时前
基于Java Web的城市花园小区维修管理系统的设计与实现(源码+论文+部署+安装)
java·开发语言·前端·spring boot·spring·毕业设计·计算机毕业设计
froginwe111 小时前
Python 条件语句
开发语言
七夜zippoe2 小时前
Python统计分析实战:从描述统计到假设检验的完整指南
开发语言·python·统计分析·置信区间·概率分布
2601_949146532 小时前
Python语音通知API示例代码汇总:基于Requests库的语音接口调用实战
开发语言·python
3GPP仿真实验室2 小时前
【Matlab源码】6G候选波形:OFDM-IM 索引调制仿真平台
开发语言·matlab
Coder_Boy_2 小时前
基于SpringAI的在线考试系统-企业级教育考试系统核心架构(完善版)
开发语言·人工智能·spring boot·python·架构·领域驱动
2301_765703142 小时前
C++中的代理模式变体
开发语言·c++·算法
咚为2 小时前
Rust tokio:Task ≠ Thread:Tokio 调度模型中的“假并发”与真实代价
开发语言·后端·rust