1 系统环境

硬件环境(Ascend/GPU/CPU): Ascend/GPU/CPU

MindSpore版本: mindspore=2.0.0

Mindformer版本：Mindformer=1.0

执行模式（PyNative/ Graph）:不限

Python版本: Python=3.9

操作系统平台: 不限

2 报错信息

2.1问题描述

服务器训练时突然中断，报错信息"EE9999,EL9999 halQueQueryInfo failed:deviceId=7, qid=5,drvRetCode=-1"，
执行“npu-smi info”提示dcmi module initialize failed. ret is -8005

3 根因分析

******此处由用户填写******

4 解决方案

******此处由用户填写******

包含文字方案和最终脚本代码