Hugging Face 政策负责人：嵌入式 AI 评估器并非易事

Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示，嵌入式 AI 评估器并非简单解法，评估结果的可复现性仍是核心难题，开放权重对复现至关重要。她指出评估是一门仍在演进的科学，不同评估之间难以有意义地比较，且失效速度较快。评估对象正从模型本身扩展到 harness 与智能体整体，而智能体评估既困难又昂贵，评估器资质标准亟需统一。