昇腾社区首页
中文
注册

昇腾模型套件

表1 昇腾模型套件

名称

介绍

版本要求

适配说明

MindSpeed LLM

MindSpeed LLM旨在为华为昇腾AI处理器上的大语言模型提供端到端的解决方案,包含模型,算法,以及下游任务。

Python版本:3.8

CANN版本:CANN 8.2.RC1

PyTorch版本:2.1.0、2.6.0

torch_npu版本:7.1.0

具体使用方法请参考LINK

MindSpeed MM

MindSpeed MM是面向大规模分布式训练的昇腾多模态大模型套件,同时支持多模态生成及多模态理解,旨在为华为昇腾AI处理器提供端到端的多模态训练解决方案,包含预置业界主流模型,数据工程,分布式训练及加速,预训练、微调、在线推理任务等特性。

Python版本:3.8、3.10

CANN版本:CANN 8.2.RC1

PyTorch版本:2.1.0、2.6.0

torch_npu版本:7.1.0

具体使用方法请参考LINK

MindSpeed RL

MindSpeed RL基于昇腾生态的强化学习套件,支持超大昇腾集群训推共卡/分离部署、多模型异步流水调度、训推异构切分通信等核心加速能力。

Python版本:3.10

CANN版本:CANN 8.2.RC1

PyTorch版本:2.1.0、2.6.0

torch_npu版本:7.1.0

具体使用方法请参考LINK

Driving SDK

Driving SDK是基于昇腾NPU平台开发的适用于自动驾驶场景的算子和模型加速库,提供了一系列高性能的算子和模型加速接口,支持PyTorch框架。

PyTorch版本为2.1.0、2.5.1及以上。

Python版本为3.8及以上。

具体使用方法请参考LINK

openMind

openMind Library是基于昇腾NPU平台的大模型微调套件,通过命令行接口或SDK支持微调、推理、评估和部署。通过简化使用流程,充分利用NPU的独特优势,为大模型应用提供高效、可扩展的解决方案。

Python版本:3.8~3.10

CANN版本:CANN 8.2.RC1

PyTorch版本:2.1.0

torch_npu版本:7.1.0

具体使用方法请参考LINK