快速批量运行命令

Ansible 是 redhat 提供的自动化运维工具,它是 Python编写,可以通过 pip 安装。

pip install ansible

它通过任务(task)、角色(role)、剧本(playbook) 组织工作项目,适用于批量化系统配置、软件部署等需要复杂操作的工作。

但对于批量运行命令的场景,ansible 就显得笨重和缓慢。

下面以在4台主机上计算/etc/hosts的md5值为例来说明。

ansible使用示例

time ansible compute -i host.invetory -f 4 -m shell -a "md5sum /etc/hosts"

compute 为主机定义文件中的主机组名称

-i 指定主机定义文件

-f 指定并发度为4

-m 指定python模块

-a 运行参数,即通过shell模块要运行的命令

注:需要事先设置好ssh免密登录。

总用时2.6 秒,比较慢。

我们可以采用其它的工具,比如 pdsh 或者 pssh。这两个工具都在 epel 源中,可以通过 yum 安装。

yum install -y pdsh*

yum install -y pssh

pssh使用示例

time pssh -H "ic-cmp01 ic-cmp02 ic-cmp03 ic-cmp4" -p 4 -i md5sum /etc/hosts

-H 指定主机列表,但不支持缩写方式;主机数量大时不太友好,但可写到文件中,通过 -h 指定;

-p 指定并发数量

-i 显示输出

输出示例

总用时 0.31秒,比ansible快8倍左右。

pdsh使用示例

time pdsh -R ssh -f 4 -w ic-cmp01-4 md5sum /etc/hosts

-R 指定连接主机的方式,这里使用 ssh ,需要事先设置好免密登录。

-f 指定并发数量。

-w 指定要连接的主机;可以使用缩写方式,这里指定了4台主机;也支持主机组 -g

md5sum /etc/hosts 是要在远程主机上运行的命令。

输出示例

默认将主机上的标准输出和标准错误同时显示,并标示出来自哪一台主机。

仅用时0.29秒,比ansible快了近10倍。

个人感觉 pdsh 的输出更易读一些,特别是主机数量特别多时,而且pdsh还提供了输出整合的功能。

time pdsh -R ssh -f 4 -w ic-cmp01-4 md5sum /etc/hosts | dshbak -c

将上面的命令通过管道给 dshbak -c 进行整合后的输出如下:

是不是可读性更好了?

相关推荐
用户790860057268 分钟前
我让 AI 自己上了趟网:browser-use 的三个致命坑和 CDP 混合方案
python
安枳杦9 分钟前
把一个 FastAPI 网页塞进 macOS 的 Dock:Tauri 2 + PyInstaller 实战
python
Star(up up up)10 分钟前
Docker系列---Docker容器基本命令(新手小白保姆级实操教程)
运维·学习·程序人生·青少年编程·docker·容器·dubbo
像风一样自由202011 分钟前
3.Dockerfile如何构建一个Python算法镜像
开发语言·人工智能·python·大模型
Dmz丶33 分钟前
前端转 AI 100 天 Day 36:Prompt 工程入门——从“感觉对了就行”到方法论
python
echome88833 分钟前
Linux 定时任务:crontab 写法与常见失效原因
linux·运维·网络·定时任务·crontab
老约家的可汗34 分钟前
Linux开发三件套:make、git、gdb 入门指南
linux·运维·服务器
日日大王学编程1 小时前
AI 时代后端方向新人的未来规划与看法
人工智能·后端·python·ai·golang
分布式存储与RustFS1 小时前
可观测性数据落进对象存储:Proscia 案例拆解与 ClickHouse 自托管配置
运维·云原生·开源·对象存储·分布式存储·s3·性能基准
CCblandy1 小时前
缓存淘汰实测:一次全表扫描把 LRU 命中率从 46% 打到 38%,W-TinyLFU 守住 50% 却贵 11 倍
后端·python·缓存·性能优化·架构