Meta AI Senior Director
来自 Madhu Guru · 期号 2026-08-24
摘要
Meta AI Senior Director Madhu Guru 继续他的“how to build great evals”系列，这次讲 Goldilocks principle：evals 不应该只评最终答案，而应该评估中间的“jobs to be done”。以金融分析 agent 为例，只检查最终股票推荐会掩盖真正的问题；团队应该分别评估客户理解、证据抽取、数据分析和推荐质量。他的核心原则是“不要太细，也不要太粗”——细到足够诊断和行动即可。