对高带宽内存进行压力测试,并输出诊断结果。
诊断项名称 |
使用Atlas A2 训练系列产品完成一轮诊断的参考耗时 |
使用Atlas 900 A3 SuperPoD 集群算力系统完成一轮诊断的参考耗时 |
是否影响NPU训练或推理 |
使用场景 |
---|---|---|---|---|
片上内存压测 |
1h~3h |
2h~3h |
是 |
片上内存诊断结果为GENERAL_WARN、PASS或IMPORTANT_WARN。 |
一键式片上内存压测诊断 |
<3h |
<3h |
是 |
训练或推理任务时,NPU芯片出现HBM ECC故障,有新增隔离页。 |
片上内存诊断 |
2s~4s |
≤2min |
否 |
训练或推理任务时,NPU芯片出现HBM ECC故障:设备出现0x80E01801故障码。 |
片上内存高危地址压测 |
≤17min |
≤17min |
是 |
片上内存诊断结果出现单比特或多比特错误。 |
片上内存压测支持的设备及场景如表2所示。(在下表中,Y表示支持,N表示不支持。)
片上内存压测会影响NPU训练或推理作业,为保证返回检测结果的正确性和准确性,请单独执行。
在执行片上内存压测前,建议提前在环境上安装fuser软件,以便Ascend DMI对NPU进程进行监测。
各参数解释如表3所示。
参数 |
说明 |
是否必填 |
---|---|---|
[-dg, --dg, --diagnosis] |
使用该参数进行整卡的故障诊断测试。 |
是 |
[-i, --items] |
指定具体的诊断检查项。
|
是 |
[-d, --device] |
指定需要进行诊断测试的Device ID,Device ID是指昇腾芯片的逻辑ID。
|
否 |
[-s, --stress] |
使用该参数进行压力测试,当前支持指定的压力测试有以下几种:片上内存压测、Aicore压测、P2P压测。
|
是 |
[-st, --st, --stress-time] |
指定高带宽内存压力测试的时间。
|
否 |
[-r, --result] |
指定压测结果和信息采集结果的保存路径,如:/test。指定的路径需符合安全要求,且不支持包含通配符“*”。
|
否 |
[-fmt, --fmt, --format] |
指定输出格式,可以为normal或json。
|
否 |
[-q, --quiet] |
指定该参数,将不再进行防呆提示,用户将默认允许该操作。 若不指定该参数,用户需要输入Y或N(y或n)确认是否进行测试。 |
否 |
注:
|
ascend-dmi -dg -i hbm -s -st 60 -q
回显状态 |
含义 |
---|---|
PASS |
片上内存压测通过。 |
FAIL |
片上内存压测失败,有新增的多比特隔离页。请参考图1进行处理。 |