使用K8S通过dcu-device-plugin调度Z100L加速卡时,服务运行一段时间,容器内hy-smi命令会有异常

同时,dcu-device-plugin对应pod的日志有健康检查错误

这里有什么可以排查的方向?(注:同样的yaml在K100_AI上运行正常)