这个品类的数据长什么样
本页面向幼儿园安全防护与应急演练场景,材料来自本园安全管理制度、隐患排查台账、应急演练方案与签到记录、门禁与校车检查表、整改通知与责任人签字页。更新节奏跟随学期与演练周期,隐患整改按期限闭环,演练记录随场次归档。材料进入混合检索时,向量路负责语义相近的隐患描述与整改要求,全文路负责门禁检查项、演练人数、签到与责任人签字等字段的精确命中,两路结果合并后候选范围大,需由重排模型按重排得分排序并过滤,再交给引用裁剪与回答生成产出可回指原文的依据条目。
配置怎么定
这一环由检索服务中的重排模型执行,输出排序后的候选与重排得分。「可回指原文的依据条目」由引用裁剪与回答生成接着完成。混合检索同时走向量与全文两路并合并结果,合并后范围大、不能直接做相似度过滤,通常再用重排模型排序并按重排得分过滤。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 混合检索 | 向量与全文两路都已启用,隐患描述与检查项字段能同时被召回 | 在搜索参数里核对两路开关,确认 searchMode 取值覆盖两路,并记录候选条数与得分 |
| 多路合并 | 两路结果已经合并,候选同时来自语义相近的隐患条目与精确命中的演练人数、签到字段 | 查看候选是否同时来自两路,对比合并前后候选条数与得分变化 |
| 重排模型 | 已绑定并用于排序与过滤,隐患项与整改期限、责任人签字等条目能排到前几条 | 对比重排前后的排序与得分,核对 usingReRank 状态,并用 similarity 与 limit 观察过滤效果 |
| 隐患排查台账与演练记录 | 隐患项与整改期限能对上原文,演练人数与签到、责任人签字一致,检查项无漏项 | 按材料逐条回指原文,核对隐患是否闭环、演练记录与方案是否相符,记录引用文本的 tokens 与数组条数 |
容易做错的三处
- 现象:候选很多但前几条不相关。原因:混合检索后范围大,未用重排得分过滤,隐患描述与检查项混在一起。
- 现象:隐患未闭环。原因:台账只记录发现项,整改期限与责任人签字未回指原文,条目对不上。
- 现象:演练记录与方案不符、检查项漏项。原因:演练人数与签到字段未精确命中,门禁与校车检查项被语义召回带偏。
怎么确认配好了
本功能验收:开重排前后对比前三条的顺序与得分,确认隐患项与整改期限、演练人数与签到、责任人签字等条目排到前面,并记录候选条数与得分。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处。
- 核对
searchMode两路开关与usingReRank绑定状态,记录候选条数与得分,再对比重排前后前三条顺序。 - 逐条回指原文,核对隐患项与整改期限、演练人数与签到、门禁与校车检查项、责任人签字,引用文本的 tokens 与数组条数分别记录。