llm_model脚本测试中的数据集精度测试结果怎么看
收藏回复举报
llm_model脚本测试中的数据集精度测试结果怎么看
t('forum.solved') 已解决
发表于2024-09-25 18:41:38
0 查看

mindie版本:1.0.RC2

测试内容:/usr/local/Ascend/llm_model/tests/modeltest

测试命令:bash run.sh pa_fp16 full_CEval 5 8 telechat_7b /data/model_from_hf/TeleChat-12B-v2/ 4

测试结果:/usr/local/Ascend/llm_model/tests/modeltest/outputs/results/NPU/precision_test/full/fp16/telechat_7b/CEval_pa_batch8_tp4_full_result.csv 

cke_2402.png

### 问题:请问下这个测试结果如何确认精确率是怎么查看的?

开源的结果为66.6

cke_10409.png

我要发帖子