跳到正文
TechCrunch · AI· Lucas Ropek·· 2 小时前AI 评分44

HuggingFace 政策负责人:引入驻场 AI 评估员并非轻松的解决方案

Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says

AI 导读

HuggingFace 政策负责人 Irene Solaiman 表示,引入驻场第三方 AI 评估员并非易事,评估资质和任务适配标准仍需规范。当前模型评测面临结果难以复现、不同测试难以有效比较等问题。评估正从模型扩展至工具和智能体整体系统,但智能体评估难度高、成本昂贵。

来源:TechCrunch · AI · techcrunch.com