并发高负载场景下的负载均衡优化方案

**** 

并发高负载场景下,负载均衡优化技术

****   

负载均衡是一种计算机技术,主要用于在多个计算机(如计算机集群)、网络连接、CPU、硬盘驱动器或其他资源中分配工作负载。 其主要目标是优化资源使用、最大化吞吐率、最小化响应时间,同时避免任何一个资源的过载。 在实际应用中,负载均衡通常通过使用多个服务器组件来替代单一的组件,以提高系统的可靠性和冗余性。 这些服务器组件可以是物理服务器,也可以是虚拟机。 

负载均衡服务通常由专用的软件和硬件(如负载均衡器)来完成。 在互联网架构中,负载均衡主要用于解决高并发和高可用性的问题。 例如,当一个网站的访问量突然增加时,负载均衡可以将这些访问请求分配到多个服务器上,从而保证网站的正常运行。

因为业务需要跑多个的cpu密集型进程,为什么这些高负载进程容易被迁移到不同cpu上运行而不是固定在自己的cpu运行?而且跑的并发进程越多,这种迁移越明显?这是因为当一个进程在一个CPU上运行时,它会占用该CPU上所有可用的时间片。如果该CPU上有其他进程也在运行,则它们将无法获得足够的时间片来执行其任务。因此,当一个进程开始变得过于缓慢时,操作系统就会将其移动到另一个CPU上以释放该CPU上的时间片。这样可以确保所有进程都能够获得足够的时间片来执行其任务。

为了确保CPU资源公平分配给各个用户,内核采用了基于Task Group的负载均衡策略。然而,这种绝对公平的设计可能导致低负载进程被迁移到高负载进程所在的CPU上,从而影响高负载组的性能表现。

-对此,您有什么看法见解?-

-欢迎在评论区留言探讨和分享。-

相关推荐
2的n次方_29 分钟前
CANN ascend-transformer-boost 架构解析:融合注意力算子管线、长序列分块策略与图引擎协同机制
深度学习·架构·transformer
Fushize2 小时前
多模块架构下的依赖治理:如何避免 Gradle 依赖地狱
android·架构·kotlin
大雨淅淅2 小时前
Eureka从入门到精通:开启微服务架构的钥匙
微服务·云原生·eureka·架构
狗哥哥3 小时前
微前端路由设计方案 & 子应用管理保活
前端·架构
Max_uuc3 小时前
【架构心法】对抗熵增:嵌入式系统中的“数据完整性”保卫战
架构
Tadas-Gao6 小时前
缸中之脑:大模型架构的智能幻象与演进困局
人工智能·深度学习·机器学习·架构·大模型·llm
wuhen_n7 小时前
系统架构设计师(四):嵌入式系统
系统架构·嵌入式操作系统
晚霞的不甘7 小时前
Flutter for OpenHarmony 可视化教学:A* 寻路算法的交互式演示
人工智能·算法·flutter·架构·开源·音视频
代码改善世界8 小时前
CANN深度解构:中国AI系统软件的原创性突破与架构创新
大数据·人工智能·架构
晚霞的不甘9 小时前
Flutter for OpenHarmony 实现计算几何:Graham Scan 凸包算法的可视化演示
人工智能·算法·flutter·架构·开源·音视频