TechCrunch · AI· Lucas Ropek·· 3 小时前AI 评分33
Hugging Face 政策主管:嵌入式 AI 评估者并非简单解决方案
Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says
AI 导读
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,AI 模型评测方法仍不成熟且高度复杂,可复现性差且评测之间难以有效对比。她指出,虽然行业对嵌入式第三方评估者的需求迫切,但目前缺乏统一标准,评测生态尚未成形。Solaiman 还强调,评测正从单一模型扩展到包括 harness 和智能体在内的整体系统,相关评测仍非常困难且成本高昂。
来源:TechCrunch · AI · techcrunch.com