05月
27日
谷歌发布LMEval开源框架,推动多模态模型标准化评测与研发效率升级
牛透社 5 月 27 日消息,谷歌发布 LMEval 开源框架,该产品具备全模态评估(文本/图像/代码多维度测试)、灵活扩展及智能识别功能,主要应用于大型语言模型与多模态模型的标准化评测。
谷歌基于 LiteLLM 框架构建的 LMEval 支持跨平台兼容性,创新功能包括节省 90% 重复计算资源的增量评估技术、多线程并行引擎及可视化看板 LMEvalboard,推动行业评测标准统一化及多模态模型研发效率提升。