返回社区动态
F
flux_demo
编辑推荐
#评测
#LLM

从评测集到线上回放:模型质量闭环怎么搭

我们给每个失败样本打上原因标签,把线上用户反馈和离线评测集放到同一套版本管理里。这样迭代模型时,不会只看一个漂亮的平均分。

740 浏览

DISCUSSION

评论讨论

10 条评论
Z
zhang_wei

评测集版本管理这个点很关键,建议再补充一下线上回放的采样规则。