Readhub

清华 NLP 实验室、OpenBMB 与面壁智能联合发布并开源面向音频模型的测评框架 UltraEval-Audio，它完善了音频评测体系和框架。其最新版本 v1.1.0 在原「一键测评」基础上，新增热门音频模型一键复现能力，扩展对专业模型与专项评测的支持，引入隔离推理运行机制，降低复现门槛、提升评测流程可控性与可迁移性。作为高影响力音频、全模态模型的御用测评工具，该版本开源将提高音频模型研发效率。此外，文中还给出了 UltraEval-Audio v1.1.0 评测框架及论文的相关链接。