--- title: 使用约束 description: "- 请保证Ascend DMI工具独立部署在各服务器产品中使用，若部署在共享目录中供多台服务器共同访问使用或在执行昇腾软件安装/升级/卸载时使用Ascend DMI工具，可能会导致功能执行失败或性能不符合预期等不可预测情况。" url: https://www.hiascend.com/document/detail/zh/mindcluster/latest/toolbox/toolboxug/toolboxug_0011.html sourcePath: /source/zh/mindcluster/2610/toolbox/toolboxug/toolboxug_0011.html indexId: d78a74006395f66a4c3e8b5cdb3bc62af9683a4156ee025ac080f7a93e93d3aa65 --- # 使用约束 - 请保证Ascend DMI工具独立部署在各服务器产品中使用，若部署在共享目录中供多台服务器共同访问使用或在执行昇腾软件安装/升级/卸载时使用Ascend DMI工具，可能会导致功能执行失败或性能不符合预期等不可预测情况。 - Ascend DMI工具不支持在同一个设备里同时开启多个进程来测试性能数据。建议在NPU空载、无业务的时候执行P2P压力测试，多进程测试时可能导致测试结果不准确或者失败等不可预测情况，例如CCAE或npu-exporter组件会调用DCMI接口监测环境状态，占用一定的通信链路带宽资源，导致结果存在误差；当CANN软件中性能分析工具在采集性能数据时，Ascend DMI工具不可使用。 - 基于安全考虑，执行ascend-dmi前，请用户确认fuser、lscpu、hccn_tool、systemd-detect-virt、dmidecode、hostname、mv、cp、gzip等指令是安全可用的；建议提前在环境上安装fuser软件（建议使用23.4及以上版本），以便Ascend DMI对NPU进程进行监测。 - 在容器场景下使用码流测试、一键式组合诊断、一键式片上内存压测诊断、AICORE诊断、AICORE压测、AICPU压测、片上内存高危地址压测、PRBS码流诊断、眼图诊断、眼图测试、NPU环境恢复等功能执行命令失败，请参见 容器场景执行AICORE命令失败，plog日志报错，驱动故障码为46 。 - Ascend DMI工具不支持混插卡等非标形态产品，可能导致功能执行失败或性能不符合预期等不可预测情况。 - 为了避免频繁输出日志影响测试结果，测试前确认Host和Device的日志级别设置为ERROR，确认及设置方法如下： 1. 确认日志级别： - Host侧：通过执行echo $GLOBAL_LOG_LEVEL命令查询，如果查询结果为非法值或者空，表示日志级别为缺省级别ERROR，对应数值3。通过export ASCEND_GLOBAL_EVENT_ENABLE=0命令关闭plog EVENT日志。 - Device侧：请参考《msnpureport工具使用(https://support.huawei.com/enterprise/zh/ascend-computing/atlas-800t-a2-pid-254184887?category=reference-guides)》，查看全局日志级别、模块日志级别和是否开启Event日志。 2. 如果日志级别不为ERROR，请参考《CANN 日志参考》中的“设置日志级别(https://www.hiascend.com/document/detail/zh/CANNCommunityEdition/910/maintenref/logreference/logreference_0008.html)”章节，设置Host和Device侧的日志级别。 - 请确保glibc版本高于2.28。 - 请确保OS的gcc版本为7.3.0及以上。 #### 功能点约束 各测试项特定约束限制请见下表。 | 功能 | 约束 | | --- | --- | | 软硬件版本兼容性测试 | 固件版本只有root属组的用户在执行软硬件版本兼容性测试的时候才可以查询。 软硬件版本兼容性测试在Atlas 800 训练服务器（型号 9000）、Atlas 800 训练服务器（型号 9010）、 Atlas 200/300/500 推理产品 、昇腾950PR&950DT系列产品场景下，不支持查询其MCU版本。 | | 带宽测试 | d2d带宽测试结果通过数据读写总量/消耗时间获取。因为d2d带宽测试和实际训练或推理一样，存在缓存、预取等内在优化，由此计算得到的带宽结果有可能超过标称带宽。 Atlas 300I Duo 推理卡的测试数据流向为h2d和d2h方式时，受数据传输方式的影响，从芯片的带宽值相比于主芯片偏低，属于正常现象。 Atlas 200I SoC A1 核心板的测试数据流向为h2d和d2h方式时，由于架构的特殊性，测试结果是从CPU直接拷贝获取的，结果和其他产品形态不一致，属于正常现象。 Atlas 200T A2 Box16/Atlas 200I A2 Box16 异构子框在虚拟机场景下，执行两个8p之间的P2P测试时，因为数据传输通道的特殊性，带宽测试偏低属于正常现象。 使用 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 在物理机、容器、虚拟机场景下重启后首次测试，如出现带宽测试偏低属于正常现象。 为确保带宽测试结果达到最佳，建议用户在物理机上进行测试，容器、虚拟机上进行测试结果可能存在偏差。带宽测试搬运数据时，受硬件资源复用性影响，比如在拷贝次数（\-et）或传输数据大小（\-s）较低的情况下，复用性会比较低，进而将可能导致带宽测试结果偏低。如需稳定测得最佳性能，建议\-s指定为512MB，\-et指定为>10。 为确保带宽测试效果准确性，建议在训练或推理业务开局的时候执行本测试项，因为例如CCAE或npu\-exporter组件会调用dcmi接口监测环境状态，会占用一定的带宽，导致带宽测试的结果存在误差。 使用带宽测试、超节点P2P带宽测试时，由于双向任务流下发时间并非完全一致，故双向P2P带宽结果存在少量波动属于正常现象。 由于NPU的工作模式会影响P2P带宽测试的计算方式，若出现P2P带宽测试结果与标称带宽相差过大，建议用户使用SMP模式。操作如下：用户登录IBMC，执行如下命令设置为SMP模式，其中1为SMP，0为AMP。 ipmcset \-d npuworkmode \-v 1 非root用户使用 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 时，在驱动25.0.RC1及之前版本里不支持p2p模式的带宽测试。 容器场景下，非root用户在驱动25.3.RC1之前版本的 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 下仅支持p2p、d2d模式的带宽测试。 | | 超节点P2P带宽测试 | 为了保证测试能正常执行，请勿在3个及以上的超节点同时执行测试，否则可能导致超节点P2P带宽测试失败。 使用带宽测试、超节点P2P带宽测试时，由于双向任务流下发时间并非完全一致，故双向P2P带宽结果存在少量波动属于正常现象。 使用超节点P2P带宽测试时，当前仅支持IPV4类型的IP地址。 执行超节点P2P带宽测试的2个节点指定的\-s、\-et参数的数值大小必须相同。 使用\-s和\-et参数指定的数据搬运量和数据拷贝的次数较小时，可能无法获取最佳性能。如需稳定测得最佳性能，建议\-s指定为512MB，\-et指定为>10。 容器场景下建议使用共享目录方式，且挂载容器时需要指定“\-\-pid=host”参数，确保容器和物理机PID一致。 使用前应确保执行超节点P2P带宽测试的2个节点为同一NPU类型。以在Device A、Device B上进行超节点P2P带宽测试为例，即当Device A的NPU芯片为Atlas 900 A3 SuperPoD 超节点时，Device B的NPU也必须为Atlas 900 A3 SuperPoD 超节点。 | | 功耗测试 | 功耗跟MCU强相关，使用前请将MCU升级至配套版本，否则可能会有aicore利用率未满100%、调压异常等问题。 功耗数据是按周期采集，且前后两次采集之间存在时间间隔，因此小概率会出现未采集到实际功耗数据进而导致显示值偏低的情况。 功耗测试有启动时间和退出时间，因此第一次和最后一次的回显信息会存在误差，属于正常现象。 从运行成本考虑，功耗测试打印次数不一定与理论值相同。以功耗工具运行时间为60s，信息打印刷新的间隔为5s为例，理论上打印次数应为12次，实际次数会低于这个数值。 因int8模式下使用的是整数运算，相比于fp16的浮点数运算，会减少一部分运算单元，因此最终呈现出的功耗值将偏低。同时，硬件设备会预设性能阈值，fp16模式下容易达到阈值并触发主动降频、电压调节等保护机制，因此硬件设备功耗不会长时间超过阈值，int8模式下功耗偏低，未达到阈值情况下，不同硬件设备的功耗可能会出现明显差异。 由于 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 是多芯片设备，功耗测试结果显示整卡功耗，不单独显示芯片功耗，且只有两张芯片功耗值都异常时才会报错。 Atlas 300I Duo 推理卡、Atlas 300I Pro 推理卡、Atlas 300V Pro 视频解析卡和Atlas 300V 视频解析卡的功耗测试模块包括AICORE、AICPU算子执行、chipMemory算子执行、DVPP图像处理。压测DVPP模块，需要在/var/log/ascend\_check（非root为~/var/log/ascend\_check）路径下生成图像文件，此路径下需要提前预留至少1GB的储存空间。 | | 算力测试 | 在算力测试中，使用\-\-et参数自定义算子执行次数时： 若指定的执行次数较小，易导致测试结果不稳定，算力值出现波动。 若指定的执行次数较大，易导致设备高温降频，算力值偏低。 若需稳定测试最佳性能，建议不显式指定\-\-et参数，优先使用默认值60。 | | 眼图测试 | 在同一NPU内，若已配置CDR回环，请在解除回环后再执行眼图测试。详细说明请参见《Atlas A2 中心推理和训练硬件 26.1.0 HCCN Tool 接口参考》的“配置功能>配置和查询CDR相关信息(https://support.huawei.com/enterprise/zh/doc/EDOC1100591765/7a0e08fc?idPath=23710424\|251366513\|254884019\|261408772\|252764743)”章节。 眼图测试使用 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 时，在容器场景下不支持驱动25.3.RC1之前版本的非root用户。 在使用Atlas 900 A2 PoD 集群基础单元、Atlas 900 A2 PoDc 集群基础单元、Atlas 800T A2 训练服务器时，容器场景下不支持驱动25.3.RC1之前版本的非root用户查询HCCS信号质量。 在 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 且CPU为鲲鹏920系列的设备上会诊断CPU侧的HCCS信号质量。仅支持物理机root用户场景。 仅A200T A3 Box8 超节点服务器的root用户且在通信端口类型为PCIe时支持全眼图测试功能。 UB参数目前仅昇腾950PR&950DT系列产品支持，无UB链路的产品不支持指定该参数。 | | 码流测试（一键式打流、自定义打流） | 该操作为高危操作，可能会导致网口link down，需要单独执行。 对于除了昇腾950PR&950DT系列产品之外的产品，执行prbs打流流程会自动关闭NPU和CDR自适应，多次执行打流命令时会反复开关自适应，当自适应开关动作未完成时，偶现误码数为67092480为正常现象。 对于除了昇腾950PR&950DT系列产品之外的产品，若使用CDR环回打流，请在完成打流后解除CDR环回，详情请参见《Atlas A2 中心推理和训练硬件 26.1.0 HCCN Tool 接口参考》的“配置功能>配置和查询CDR相关信息(https://support.huawei.com/enterprise/zh/doc/EDOC1100591765/7a0e08fc?idPath=23710424\|251366513\|254884019\|261408772\|252764743)”章节。 | | 时延测试 | 使用超节点P2P时延测试功能时，为了保证测试能正常执行，请勿在3个及以上的超节点同时执行测试，否则可能导致超节点P2P时延测试失败。 建议在物理机上进行时延测试。在容器、虚拟机上进行测试结果可能存在偏差。 超节点P2P时延测试不支持容器场景。 使用超节点P2P时延测试时，当前仅支持IPV4类型的IP地址。 使用前应确保执行超节点P2P时延测试的2个节点为同一NPU类型。以在Device A、Device B上进行超节点P2P时延测试为例，即当Device A的NPU芯片为Atlas 900 A3 SuperPoD 超节点时，Device B的NPU也必须为Atlas 900 A3 SuperPoD 超节点。 昇腾950PR&950DT系列产品仅支持节点内的P2P时延测试。 | | 眼图诊断 | 使用 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 、Atlas 900 A2 PoD 集群基础单元、Atlas 900 A2 PoDc 集群基础单元、Atlas 800T A2 训练服务器、A200I A2 Box 异构组件时，在容器场景下不支持驱动25.3.RC1之前版本的非root用户。 在 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 且CPU为鲲鹏920系列的设备上会诊断CPU侧的HCCS信号质量。仅支持物理机root用户场景。 | | 带宽诊断 | Atlas 200T A2 Box16/Atlas 200I A2 Box16 异构子框在虚拟机场景下，由于数据传输通道的特殊性，BandWidth诊断将不执行两个8p之间的P2P测试。 带宽诊断使用 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 时，在容器场景下不支持驱动25.3.RC1之前版本的非root用户。 | | NIC诊断 | 使用NIC诊断前需要保证环境上所有device参数面网络已连通。 | | PRBS码流诊断 | 对于除了昇腾950PR&950DT系列产品之外的产品，执行prbs打流流程会自动关闭NPU和CDR自适应，多次执行打流命令时会反复开关自适应，当自适应开关动作未完成时，偶现误码数为67092480为正常现象。 对于除了昇腾950PR&950DT系列产品之外的产品，若使用CDR环回打流，请在完成打流后解除CDR环回，详情请参见《Atlas A2 中心推理和训练硬件 26.1.0 HCCN Tool 接口参考》的“配置功能>配置和查询CDR相关信息(https://support.huawei.com/enterprise/zh/doc/EDOC1100591765/7a0e08fc?idPath=23710424\|251366513\|254884019\|261408772\|252764743)”章节。 | | AICORE压测 | aicore压测需要占用HOST服务器侧约20~40GB的内存，执行命令前请预留足够内存，防止进程异常中断。 | | AICORE诊断 | aicore诊断完成后请检查环境aic和bus电压是否正常，若异常，请立即执行ascend\-dmi \-r命令恢复NPU环境。详细说明请参考NPU环境恢复。 | | 功耗压测 | 为保证返回检测结果的正确性和准确性，功耗压测需要单独执行。 功耗跟MCU强相关，使用前请将MCU升级至配套版本，否则可能会有aicore利用率未满100%、调压异常等问题。 功耗压测不支持在设备所在环境存在问题的场景下运行，例如高温、散热有问题的环境，否则会出现硬件设备掉卡（掉卡即使用npu\-smi info命令查询设备基本信息时，NPU不在位）、硬件设备故障等异常情况。 功耗压测不能用于温度测试，即试图测试硬件设备在不同温度下的散热情况，否则会出现硬件设备掉卡（掉卡即使用npu\-smi info命令查询设备基本信息时，NPU不在位）、硬件设备故障等异常情况。 | | 一键式片上内存压测诊断 | 压测过程中可能涉及芯片复位，需使用root用户执行压测，否则会导致复位失败。 | | 片上内存压测 | 使用\-\-st参数指定片上内存压力测试的时间时，时间为实际执行片上内存算子压测的时间，不包括其他接口和算子执行完成内存释放的耗时，因此实际执行时间会比指定片上内存压力测试的时间多。 | | P2P压测 | 不建议在降P启动场景中使用此功能。 Atlas 800I A2 推理服务器（32GB PCIe款）不支持使用P2P压测。 | | NPU环境恢复 | 使用 Atlas A2 训练系列产品 、 Atlas A2 推理系列产品 仅支持在物理机、容器场景下执行。 | | DSA压测 | 仅 Atlas A2 训练系列产品 、 Atlas A2 推理系列产品 、 Atlas A3 训练系列产品 、 Atlas A3 推理系列产品 、昇腾950PR&950DT系列产品支持。 |