统计量描述与样例

稀疏表数量

训练过程中创建的稀疏表数量。

训练时创建的稀疏表数量。

CurrentTableNum: 2

多级缓存命中率

查表过程中去重分桶后的key在片上内存、DDR中的比例：

1.当前step的命中率。

2.所有step累积的命中率。

命中片上内存的key数量/所有key数量。

命中DDR的key数量/所有key数量。

Current Swap Key Num:18939

Current HBM Rate:0.807

ToTal Swap Key Num:239075

Average HBM Rate:0.826

多级缓存传输量

换入换出的数据量：

1.当前step 当前rank的key的换入换出量。

2.累积到当前step为止当前rank的换入换出Key的总量。

片上内存、DDR换入换出的key数量。

Current Swap Key Num: 1000

ToTal Swap Key Num: 10000

多级缓存传输速度

换入换出的速度:

1.当前step的速度。

2.所有step的平均速度。

换入换出的key num除以时间。

Current Swap Speed: 100 /ms

Average Swap Speed: 120 /ms

各阶段耗时和吞吐

Host侧吞吐量、耗时、速度：

1.当前step当前rank的吞吐量、耗时、速度。

2.所有step的当前rank的总吐量、总耗时、平均速度。

Host侧输入数据的key num, 以及处理速度。

Current Batch Key Num:65536

Current Key Process Speed:13107.2 / ms

ToTal Batch Key Num:524288

Average Key Process Speed:2184.533 / ms

去重率

进行卡内去重后的消除的key占进入卡总体key的比例。

1 - （卡内去重后key / 卡内进入总体key ）

Current Unique Key Num:44934

Current Deduplication Rate: 50%

ToTal Unique Key Num:358389

Average Deduplication Rate: 50%