本文目录
您的列表
定义引用须证明什么
引用不是装饰。它应支撑主要 claim、指向正确文档并 enable 快速验证。若引用仅看起来相关,用户获得 false confidence。
评估 accuracy、relevance 和 readability
好的 QA 分离三层:回答是否 make correct claim、引用是否 truly support、用户能否无 friction 阅读并 follow 该 reference。任一层失败都会 degrade trust。
- 检查引用含 evidence 而非仅 topic。
- 确认来源 current 且 authorized。
- 验证 reference visible 且 navigable。
抽样 easy case 和 edge case
easy answer inflate 质量感知。纳入 ambiguous 问题、similar 文档和 partial evidence 案例。此处可见系统是 with judgment 引用还是仅 semantic proximity。
以 actionable 语言记录失败
不要全标为「bad answer」。区分 irrelevant citation、insufficient citation、incomplete retrieval、outdated source 或 overstated phrasing。该 granularity 使团队 fix 系统而无 vague debate。
将 QA 变为 release gate
rubric 在 conditioning deployments、corpus changes 和 prompt updates 时才 real。若 QA 只是 occasional review 文档,不会改变系统行为。
解锁完整文章
使用您的 Kodex 社区账户登录以继续阅读。

.jpg)