k8s POD上RDMA网卡VF不生效问题

1、配置

multus、sriov-device-plugin、whereabouts都来自https://github.com/k8snetworkplumbingwg/

有的环境总是看不到POD内的RDMA接口,有的环境node重启后再启动的pod看不到

现象为pod内执行ifconfig看不到接口,或者kubectl describe pod pod-1中没有:

2、查看sriov-device-plugin和multus

2.1 sriov-device-plugin

pod启动后,可以看到sriov分配了RDMA网卡:

cat /var/log/sriovdp/sriovdp.INFO

...

server.go:159\] AllocateResponse send: \&AllocateResponNOX_COM_MLNX_SRIOV_RDMA0: 0000:27:00.1, ### 2.2 multus kubectl logs kube-multus-ds-amd64-h59ln -n kube-system ![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/9658670a33e64460888560f6ee35aca1.png) 可以看到生成了配置文件,根据pod的描述/host/etc/cni/net.d/映射到了/etc/cni/net.d/ 但是对应目录没有这个文件,只有00-multus.conf.cilium_bak 这是被cilium改掉了 ## 3 修改 ```bash kubectl edit cm cilium-config -n kube-system ``` 将cni-exclusive: "true"修改为cni-exclusive: "false" 注:cni-exclusive设置为true会把其他cni的conf文件都覆盖掉 然后重启cilium: ```bash kubectl rollout restart daemonset/cilium -n kube-system ```

相关推荐
麦兜*1 小时前
深入解析云原生可观测性体系:基于OpenTelemetry标准与eBPF技术实现全栈链路追踪与智能告警的架构设计与生产实践全指南
云原生
灰子学技术1 小时前
istio从0到1:iptables设置
云原生·istio
玉梅小洋2 小时前
Docker 镜像在节点间的高效拷贝的方案
运维·docker·容器
Cyber4K2 小时前
【Kubernetes专项】K8s 控制器 DaemonSet 从入门到企业实战应用
云原生·容器·kubernetes
切糕师学AI3 小时前
RKE(Rancher Kubernetes Engine) 是什么?
云原生·容器·kubernetes·rancher
BLUcoding3 小时前
使用 Docker Compose 安装常用中间件
docker·中间件·容器
麦兜*3 小时前
深入剖析云原生Service Mesh数据平面Envoy核心架构:基于xDS协议与WebAssembly实现动态流量管理与安全策略的微服务治理实战指南
云原生·架构·service_mesh
牛奶咖啡133 小时前
Prometheus+Grafana构建云原生分布式监控系统(十五)_Prometheus中PromQL使用(二)
云原生·prometheus·集合运算·对查询结果排序·直方图原理·统计掉线的实例·检查节点或指标是否存在
小义_4 小时前
【Docker】知识一
linux·docker·云原生·容器
龙飞054 小时前
Kubernetes 排障实战:PVC 一直 Pending 的原因与解决方案
运维·学习·云原生·容器·kubernetes