调度系统部署架构是什么样的呢?

简单示例一个部署架构图,如下所示:

📘 各组件说明:

✅ 服务器端组件(控制节点)
  • Slurm :slurmctld(主控调度器),slurmdbd(数据库服务)
  • PBS Pro :pbs_server(主控服务),pbs_sched(调度器)
  • LSF :mbatchd(主控调度器),lsadmin(管理工具)
✅ 客户端组件(计算节点)
  • Slurm :slurmd(守护进程,接收并执行任务)
  • PBS Pro :pbs_mom(任务管理器)
  • LSF :res 和 sbatchd(资源和作业守护进程)
✅ 共享存储系统
  • 所有节点通过网络挂载统一的文件系统,用于读写作业数据。

✅ 主控服务和调度器是否部署在同一台服务器?

情况一:小型或中型集群

  • 主控服务(如 pbs_server、slurmctld) 和 调度器(如 pbs_sched、slurmdbd) 通常部署在同一台服务器上。
  • 优点:
    • 简化部署和维护;
    • 节省硬件资源;
    • 网络通信延迟低。

情况二:大型或高可用集群

  • 主控服务和调度器可以部署在不同的服务器 上,甚至采用冗余部署(如主备模式)。
  • 例如:
    • Slurm 支持将 slurmctld 和 slurmdbd 分开部署;
    • PBS Pro 可以将 pbs_server 和 pbs_sched 分离,提高调度性能;
    • LSF 支持多级调度架构,调度器可以分布式部署。
集群规模 是否分离部署主控与调度器 推荐做法
小型(<50节点) ❌ 不分离 同一台服务器部署即可
中型(50--500) ✅ 可选分离 根据负载决定是否分离
大型(>500) ✅ 建议分离 提高性能与可维护性
高可用需求 ✅ 建议主备部署 增加容错能力
相关推荐
飞奔的瓜牛7 小时前
Nginx 生产环境运维实践:常见问题、关注要点与日常维护
运维·nginx
伯奥克客服9 小时前
2026年视频综合一体机架构选型:从接口协议到流媒体底层的深度技术解析
架构·音视频
Eyfcom10 小时前
〖物流 SaaS 实战 02〗SaaS 租户的计费与订阅模型:从“一锤子买卖”到“按需订阅”
linux·服务器·数据库·快递系统·物流saas实战
瑞克-桑切斯12 小时前
Kubernetes 1.28 保姆级新手学习教程
运维·学习·docker·云原生·容器·kubernetes
数据库急诊室_阿哲12 小时前
一次割接后的性能复核记录:基线、样本、回滚点
运维·数据库·dba
stark张宇12 小时前
分布式事务方案设计与选型思考:2PC、TCC
分布式·架构
忆挽篱笙歌12 小时前
systemV进程通信
linux·运维·服务器
飞奔的瓜牛14 小时前
Wireshark 抓包实战:呼叫中心项目中的 SIP、DTMF 与 RTP 分析
运维·wireshark
zdr尽职尽责15 小时前
Unity 3C 动画系统:从「蜘蛛网」到可维护的动画架构
unity·架构·游戏引擎