Ascend/Megatron-LM在megatron_npu_adaptor根目录执行脚本,对数据集和VOCAB词表进行处理报错
收藏回复举报
Ascend/Megatron-LM在megatron_npu_adaptor根目录执行脚本,对数据集和VOCAB词表进行处理报错
t('forum.solved') 已解决
新人帖
发表于2024-08-09 16:22:45
0 查看

Ascend/Megatron-LM在megatron_npu_adaptor根目录执行脚本,对数据集和VOCAB词表进行处理报错。

https://gitee.com/ascend/Megatron-LM:

cke_589.png

cke_1051.png

通过pip3 install importlib_metadata后,手动import没有问题,但执行数据处理脚本仍然报上面的错误。深度手动执行shell脚本中调用的python脚本,报错如下:

cke_14769.png

transformer_engine要怎么安装呢?pip install找不到对应的包

我要发帖子