快慢卡定位算子比对操作案例

从概览页确定快慢卡

在MindStudio Insight的概览界面查看计算/通信概览区域，可以看到，0-7卡为计算慢卡（计算时间长，通信时间短），8-15卡为计算快卡（计算时间短，通信时间长）后者通信时间长是等待前者所导致的。

图1 计算快慢卡概览页

对比算子差异

按照算子（Operator）中描述，可以快速锁定造成耗时差异的算子，如图2所示，首先设置7、8两卡进入卡间比对模式，随后按总耗时升序排列。若快慢卡存在较大算子数量差异，说明存在计算负载任务不均衡的问题，可与模型开发人员确认，该负载不均能否规避；若某类算子数量一致，但平均耗时存在差异，可求助相关算子开发负责人，或者结合快慢卡定点精确分析法中方法，通过时间线（Timeline）进一步确认问题根因。

图2 算子卡间比对

同理，也可使用模型调优快速分析（msprof-analyze命令行工具）工具中的compare工具，进入KernelCompare比对页，分析算子差异。

图3 compare性能拆解比对工具KernelCompare比对页