查看采集结果
完成日志采集配置,训练任务下发成功后,可在计算节点的磁盘空间,查看日志采集结果。
以存储路径预创建的“/var/log/ascend_log/”目录为例,存储目录结构示例如下,其中涉及的具体日志文件可参考日志文件清单:
|— /var/log/ascend_log |— app_log |—${JOB_NAME} # 训练作业ID |—${NODE_NAME} # 节点名 |—ascend_work_path |- log # CANN应用类日志 |- atrace # CANN软件栈trace日志 |- extra-info/data-dump # CANN算子输入dump文件 |- ascend_cache_path |- # CANN算子编译缓存文件 |—train_log |- (.*?)rank-(.*?).log # 用户训练日志 |—environment_check |- npu_info_before.txt # NPU环境检查文件 |- npu_info_after.txt # NPU环境检查文件 |—host_log |—messages或syslog # 宿主机OS系统日志 |—${JOB_NAME} # 训练作业ID ... |— device_log |—msnpureport_log_new |—slog # slog日志 |—message # sys日志 |—hisi_logs # 黑匣子日志 |—stackcore # stackcore文件 |—module_info # 模块日志 |—event_sched # 事件调度模块维测信息 |—msnpureport_log_new ....
父主题: 日志转储配置