测试前提

测试前不仅要了解效果指标和性能指标评估标准，还需要进行测试环境BIOS相关配置。

验证集AUC

ModelZoo集成多种常用的搜索和推荐模型，支持对模型的训练效果（如AUC）和推理性能（如吞吐量、延迟）进行全链路评估。AUC（Area Under the Curve）用于评估训练效果，是衡量二分类模型区分正负样本能力的核心指标。只有当模型在验证集上的AUC达到合理阈值时（参考表1），其训练过程的有效性才得以保证，后续性能评估性才具备实际意义。吞吐量反映系统单位时间内的推理请求处理能力，通常以QPS（Queries Per Second）量化；延迟则衡量单次请求从输入到输出的响应耗时。

表1 ModelZoo搜推模型效果指标AUC参考值
处理器型号	Wide_and_Deep模型	DLRM模型	DeepFM模型	DFFM模型	DSSM模型
鲲鹏920 7282C处理器	0.770489±0.02	0.787202±0.02	0.774716±0.02	0.762668±0.02	0.496895±0.02

BIOS配置说明

测试前需要进行BIOS环境配置，相关配置项、配置说明以及配置路径如表2所示。

表2 BIOS配置项说明
配置项	配置说明	菜单路径	推荐值
Power Policy	设置电源策略为性能模式	“Advanced->Performance Config->Power Policy”	Performance
SMT2	开启超线程模式	“Advanced> Power And Performance Configuration > CPU PM Control > SMT2”	Enabled
Support Smmu	System Memory Management Unit	“Advanced > MISC Config > Support Smmu”	Disabled
CPU Prefetching Configuration	开启CPU预取	“Advanced> Power And Performance Configuration > CPU PM Control > CPU Prefetching Configuration”	Enabled

父主题： 启动服务并压测