华为计算微信公众号
昇腾AI开发者公众号
华为计算微博
华为计算今日头条
硬件环境: 800T A2 8*64G
软件配置:Mindspore 2.3.0 MindFormer 1.2.0
Qwen1.5-14b模型如何使用分布式权重进行模型lora微调,配置的yaml文件应该如何调整?
这种方式可以解决npu空间不足的问题吗,有没有实际训练使用案例的链接?
我要发帖子
硬件环境: 800T A2 8*64G
软件配置:Mindspore 2.3.0 MindFormer 1.2.0
Qwen1.5-14b模型如何使用分布式权重进行模型lora微调,配置的yaml文件应该如何调整?
这种方式可以解决npu空间不足的问题吗,有没有实际训练使用案例的链接?