docker搭建ray集群

1. 安装docker 已安装过docker 没安装流程

启动 Docker 服务

bash 复制代码
sudo systemctl start docker
sudo systemctl enable docker   # 设置开机即启动docker

验证 Docker 是否安装成功

bash 复制代码
docker --version

2. 部署ray

sh 复制代码
# 先停止docker服务
systemctl stop docker   
# 编辑 Docker 的配置文件  更改docker 镜像保存的路径 以防默认目录存储空间不足
 vim /etc/docker/daemon.json
{
  "data-root": "/data/docker"  # 自己存储空间大的目录
}
# 再次启动docker服务 使上面的配置文件生效
systemctl start docker   
# 拉取镜像到本地
docker pull **镜像名称:版本** 
# 查看镜像
docker images
 # --network host参数 使docker环境共享宿主机IP
 # -v  参数使docker环境共享宿主机挂载目录
 # tail -f /dev/null 参数  挂起docker  使其不中断
docker run -d --name **docker环境名称 自命名即可** --network host -v /mnt1:/mnt1 -v /mnt2:/mnt2 -v /data:/data -v /mnt3:/mnt3 **镜像名称:版本** tail -f /dev/null
# 查看docker环境列表
docker ps
#进入docker环境  执行任务
docker exec -it **自命名的docker环境名称** /bin/bash 
# 退出docker环境
exit  
# 停止容器
docker stop ailab-data-pipelinev3   
 # 删除已停止的容器
docker rm ailab-data-pipelinev3    
# 查看ray版本   所有机器ray版本应保持一致  否则集群不能使用
ray --version
# head节点启动命令
ray start --head --port=6379 --dashboard-host=0.0.0.0 --dashboard-port=8265  --num-cpus 96
#每个work节点启动ray服务命令   请替换IP和--num-cpus数目 --num-cpus 可以是nproc的值
ray start --address='127.0.0.0:6379' --num-cpus 96    
ray start --address='127.0.0.0:6379' --num-cpus 32
# 提交任务命令
ray job submit --working-dir ./ray_code -- python3 ray.py
相关推荐
早睡冠军候选人19 小时前
K8s学习----节点(Node)
运维·学习·云原生·容器·kubernetes
2501_9200470319 小时前
k8s-pod的容器类型
云原生·容器·kubernetes
MinggeQingchun19 小时前
Elasticsearch - Linux下使用Docker对Elasticsearch容器设置账号密码
elasticsearch·docker
❀͜͡傀儡师20 小时前
Docker部署Kafka Native
docker·容器·kafka
可爱的小小小狼1 天前
k8s中的kubelet
容器·kubernetes·kubelet
z_y_j2299704381 天前
服务器中使用Docker部署前端项目
服务器·前端·docker·容器
疯癫的老码农1 天前
【小白入门docker】创建Spring Boot Hello World应用制作Docker镜像并运行
java·spring boot·分布式·docker·微服务
小刘不想改BUG1 天前
Docker 部署微服务项目详细步骤
docker·微服务·容器
橄榄熊1 天前
Docker MySQL 使用全流程
mysql·docker·容器
邂逅星河浪漫1 天前
【DockerFile+Nginx+DockerCompose】前后端分离式项目部署(docker容器化方式)
nginx·docker·centos·部署·docker-compose·dockerfile·容器化部署