【openstack】卷迁移导致的虚机热迁移失败问题排查及解决

问题现象

执行nova live-migration --block-migrate uuid热迁移虚机失败。

问题定位

执行nova migration-list --instance-uuid <uuid>确定迁移源节点、目标节点。

检查源节点nova-compute服务日志,发现如下报错:

txt 复制代码
ERROR nova.virt.libvirt.driver [req-01e02130-dbff-4c60-b35c-2a6922a2b95b req-a5e3dbcf-1358-45af-bda4-d450fabe6bfd 9d2ac2da5c9d45438493daec30280a3d eef10a485d6f4b74ad27600f25dbe452 - default default] [instance: 86d8b8e0-70a1-4444-ad4a-36362ca6b539] Live Migration failure: Requested operation is not valid: domain has active block job: libvirtError: Requested operation is not valid: domain has active block job

检查目标节点nova-compute服务日志,未发现异常信息。

根据源节点报错提示domain has active block job可知迁移失败的原因为虚机有活跃的卷任务,执行nova show <uuis>确定虚机的domain及宿主机,至虚机所在宿主机执行如下命令:

shell 复制代码
$ sudo virsh domblklist <domain>
Target     Source
------------------------------------------------
hda        /var/lib/nova/instances/86d8b8e0-70a1-4444-ad4a-36362ca6b539/disk.config
sda        ebs_ceph_cache_sys/volume-3e7460c3-bf48-4a83-ab2c-3a054eb12fbb
sdb        ebs_ceph_data/volume-42fd198f-9a43-4a25-9dda-3ebaf1119201

$ sudo virsh blockjob <domain> sda --info
No current block job for sda

$ sudo virsh blockjob <domain> sdb --info
Block Copy: [ 99 %]

可见sdb有卷拷贝任务正在执行,执行nova volume-attachments <uuid>确定sdb的volume id,继续执行cinder show <volume id>确定该卷有热迁移任务卡死。

问题解决

至虚机宿主机执行如下命令,强制终止卷迁移任务:

shell 复制代码
sudo virsh blockjob <domain> sdb --abort

再次执行虚机热迁移成功。

相关推荐
Linux界最忧郁之人15 天前
华为云ECS&IMS&AS实战|弹性云服务器、私有镜像、弹性伸缩完整实验
linux·运维·服务器·centos·华为云·openstack
知已难寻16 天前
03 · OpenStack的计算管理 Nova
运维·服务器·开发语言·云原生·云计算·openstack·开源软件
xbzb17 天前
OpenStack 网络管理(理论):Linux 网络虚拟化是 Neutron 的地基
linux·服务器·网络·openstack·network·neutron
xbzb17 天前
OpenStack 网络管理(实操):建网络、连路由、浮动 IP 与安全组
网络·安全·openstack·ip·安全组·浮动
xbzb19 天前
OpenStack 计算管理:实例锁定后被普通用户解锁了?避坑实操
openstack·实例·解锁·用户·计算·锁定
静以修身zzz19 天前
OpenStack对象存储-Swift、OpenStack编排管理-heat、OpenStack网络管理-neutron
linux·运维·服务器·架构·openstack·swift
知已难寻20 天前
01 · OpenStack的认证管理 Keystone
运维·服务器·云原生·云计算·openstack
青峰讲运维20 天前
OpenStack Heat 编排:用模板一键交付云业务,告别手动点页面
开发语言·php·openstack
青峰讲运维21 天前
OpenStack 存储深度解析|Cinder 块存储 + Swift 对象存储原理与完整实操(Yoga)
开发语言·openstack·swift
知已难寻21 天前
00 · OpenStack 总纲——从云计算到 OpenStack 全景
运维·服务器·云原生·云计算·负载均衡·openstack·perl