查看Pod日志出现报错:NPU is busy, check again

问题现象描述

执行kubectl logs -n vcjob mindx-dls-llama2-default-test-0 -f命令查看Pod日志,出现报错:npu is busy, check again。

原因分析

解决措施

  1. 执行以下命令查询全部运行中的容器。

    docker ps

  2. 执行以下命令查看指定容器是否已经正常挂载NPU。

    docker inspect 容器ID | grep davinci

  3. 如果该指定的容器已挂载NPU,执行以下命令停止容器。

    docker stop 容器ID

在任务yaml中添加以下字段,示例如下。