训练案例是从horovod github上下载的,在n卡多机环境下没问题,module模块也加载了mpi。报错如下
slurm如下
从您的图中发现几个问题,
1、slurm脚本里面没有DTK pytorch /tensorflow horovod的环境变量,
2、slurm脚本里队列参数 -p normal应该不是DCU队列,需确认
这里建议您使用容器实例板块,找到需要的镜像创建容器,这是容器实例板块的地址,https://ac.sugon.com/ac/console3/index.html#/container-service/container-instance
从您的图中发现几个问题,
1、slurm脚本里面没有DTK pytorch /tensorflow horovod的环境变量,
2、slurm脚本里队列参数 -p normal应该不是DCU队列,需确认
这里建议您使用容器实例板块,找到需要的镜像创建容器,这是容器实例板块的地址,https://ac.sugon.com/ac/console3/index.html#/container-service/container-instance
如果没有找到需要的镜像,也可在光源里查找 https://developer.hpccube.com/news/domestic/8476/