M03 练习
← 返回章节RRF手算
两组排名为[A,B,C]与[B,D,A],k=60,rank从1开始。计算A和B的RRF,谁更高?
提示
- 缺席列表记0,不把rank从0开始。
查看参考解与自评
检索指标分层
共有3个相关块,前3条检索结果为[无关,相关1,相关2]。求Recall@3、Precision@3和单查询RR。
提示
- RR只看第一个相关结果的位置。
查看参考解与自评
上下文预算选择
可用输入预算1000。必须保留系统/工具300、当前用户约束100、订单事实200;当前政策300、旧日志800、寒暄200可选。如何选择?还要提醒哪一个被题目省略的预算?
提示
- 先保留决定动作正确性的最小证据。
查看参考解与自评
摘要能否授权
摘要写“用户上次已经同意退款”,审批表找不到记录。Agent是否可以提交?如何恢复用户体验?
提示
- 上下文不是业务授权事实源。
查看参考解与自评
旧政策与缓存
P01-v1和P01-v2都含“退款”,向量检索把旧版排第一。提出两种修复,并解释仅提高top_k为何不充分。
提示
- 版本过滤是数据语义,不是相似度偏好。
查看参考解与自评
设计压缩实验
比较完整历史与摘要压缩,设计控制变量、指标和至少一个会使压缩失败的任务。
提示
- 摘要的额外调用和后续补查都要计费。