--- title: 数据采集 description: "采集服务化性能数据。" url: https://www.hiascend.com/document/detail/zh/canncommercial/latest/devaids/Profiling/mindieprofiling_0005.html sourcePath: /source/zh/canncommercial/900/devaids/Profiling/mindieprofiling_0005.html indexId: 0bfc986e44a207db39f141f6b93b8ad60ea67ace758c1ed921af3fb674c576b673 --- # 数据采集 #### 功能说明 采集服务化性能数据。 #### 注意事项 - 服务化调优工具的acl_task_time开关与msprof工具的动态采集功能存在冲突，建议不要同时使用。msprof工具的动态采集功能相关介绍请参见《性能调优工具(https://www.hiascend.com/document/detail/zh/canncommercial/900/devaids/Profiling/atlasprofiling_16_0144.html)》。 #### 使用示例 1. 创建采集配置文件。服务化性能数据采集通过json配置文件，配置采集数据的开关、保存路径等。 - 自动创建：该文件支持自动创建，在 2 过程中配置SERVICE_PROF_CONFIG_PATH环境变量后，运行MindIE Motor服务可自动创建默认配置的json文件。 - 手动创建：该json配置文件可以在任意路径下新建，此处以ms_service_profiler_config.json文件名为例，配置文件格式如下： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 { "enable": 1, "prof_dir": "${PATH}", "profiler_level": "INFO", "acl_task_time": 0, "acl_prof_task_time_level": "", "aclDataTypeConfig": "", "aclprofAicoreMetrics": "", "api_filter": "", "kernel_filter": "", "timelimit": 0, "domain": "", "torch_prof_stack": false, "torch_prof_modules": false, "torch_prof_step_num": 0 } **表1 参数说明** | 参数 | 说明 | 是否必选 | | --- | --- | --- | | enable | 是否开启性能数据采集的开关，取值为： 0：关闭。 1：开启。 | 是 | | prof\_dir | 采集到的性能数据的存放路径，可自定义，str类型，默认值为${HOME}/.ms\_server\_profiler。 | 否 | | profiler\_level | 数据采集等级，取值为INFO。 | 否 | | host\_system\_usage\_freq | CPU和内存系统指标采集频率，默认关闭不采集。范围整数1~50，单位Hz，表示每秒采集的次数。设置为\-1时关闭采集该指标。 说明： 开启该功能可能占用较大内存，不建议修改。 | 否 | | npu\_memory\_usage\_freq | NPU Memory使用率指标的采集频率，默认关闭不采集。范围整数1~50，单位Hz，表示每秒采集的次数。设置为\-1时关闭采集该指标。 说明： 开启该功能可能占用较大内存，不建议修改。 | 否 | | acl\_task\_time | 开启采集算子下发耗时、算子执行耗时数据的开关，取值为： 0：关闭。默认值，配置为0或其他非法值均表示关闭。 1：开启。 该功能开启时调用aclprofCreateConfig接口的ACL\_PROF\_TASK\_TIME\_L0参数。 2：开启基于MSPTI接口的数据落盘。 该功能开启时调用MSPTI接口进行性能数据采集，需要在拉起服务前配置如下环境变量： export LD\_PRELOAD=${INSTALL\_DIR}/lib64/libmspti.so ${INSTALL\_DIR}请替换为CANN软件安装后文件存储路径。以root用户安装为例，安装后文件默认存储路径为：/usr/local/Ascend/cann。 3：开启基于Torch Profiler接口的数据落盘。 说明： 以上aclprofCreateConfig接口及MSPTI接口详细介绍请参见《性能调优工具(https://www.hiascend.com/document/detail/zh/canncommercial/900/devaids/Profiling/atlasprofiling\_16\_0144.html)》。 该功能开启时会占用一定的设备性能，导致采集的性能数据不准确，建议在模型执行耗时异常时开启，用于更细致的分析。 | 否 | | acl\_prof\_task\_time\_level | 设置性能数据采集的Level等级和时长，取值为： L0：Level0等级，表示采集算子下发耗时、算子执行耗时数据。与L1相比，由于不采集算子基本信息数据，采集时性能开销较小，可更精准统计相关耗时数据。等同于aclDataTypeConfig参数配置ACL\_PROF\_MSPROFTX、ACL\_PROF\_TASK\_TIME\_L0。 L1：Level1等级，采集AscendCL接口的性能数据，包括Host与Device之间、Device间的同步异步内存复制时延；采集算子下发耗时、算子执行耗时数据以及算子基本信息数据，提供更全面的性能分析数据。等同于aclDataTypeConfig参数配置ACL\_PROF\_MSPROFTX、ACL\_PROF\_TASK\_TIME、ACL\_PROF\_ACL\_API。