Madhu Guru — Meta AI 高级总监
来自 Madhu Guru · 期号 2026-08-21
摘要
Madhu Guru — Meta AI 高级总监 Madhu Guru 认为，企业做不好 AI 系统的根本原因之一是缺乏 eval strategy。他提出的分层方法包括：用 hill-climbing evals 推动产品边界，用 regression evals 防止当前产品被改坏，用 smoke tests 覆盖安全和基本能力，再用接近真实流量的 launch evals 做发布前验证。关键点是：evals 需要覆盖“成本 / 真实性”的光谱，而不是只靠一个 benchmark。