TechCrunch · AI· Lucas Ropek·· 2 小时前AI 评分31
Hugging Face 政策负责人:嵌入式 AI 评估器并非易事
Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says
AI 导读
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示,嵌入式 AI 评估器不会成为简单解决方案,评估结果的可复现性仍是核心难题,开放权重对复现至关重要。她指出评估是一门仍在演进的科学,不同评测之间难以有意义地比较,且失效速度较快。评估对象正从模型本身扩展到包含 harness 和 agent 的整个系统,而智能体评估既困难又昂贵。
来源:TechCrunch · AI · techcrunch.com