这个品类的数据长什么样
本页面向企业新员工入职培训场景,材料包括入职培训计划、课程签到表、岗位说明书三类。入职培训计划按批次更新,字段含课程名称、培训日期、讲师、参训人员名单与审批签字;课程签到表按场次生成,字段含签到日期、签到人、岗位、签字或回执;岗位说明书按岗位版本发布,字段含岗位名称、职责条目、生效日期与版本号。三类材料进入混合检索时各自承担不同角色:入职培训计划提供培训安排与依据条目,课程签到表提供到场与签字凭据,岗位说明书提供岗位职责与版本基准。更新节奏上,培训计划随批次调整,签到表随场次归档,岗位说明书随岗位变更换版。字段特征集中在名称、数量、日期、签字与版本号,这些字段决定依据条目能否回指原文并判定是否为现行版本。
配置怎么定
这一环由检索服务中的重排模型执行,输出排序后的候选与重排得分。「可回指原文的依据条目」由引用裁剪与回答生成接着完成。混合检索同时走向量与全文两路并合并结果,合并后范围大、不能直接做相似度过滤,通常再用重排模型排序并按重排得分过滤。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 入职培训计划 | 培训日期、课程名称、参训人员数量、审批签字需与签到表逐项对上,且为现行批次 | 在搜索参数里核对 searchMode 是否同时启用向量与全文两路,并查看候选是否同时来自两路 |
| 课程签到表 | 签到日期、签到人、岗位、签字或回执需与培训计划同一场次一致,缺签字或回执的条目不能作为依据 | 对比重排前后的排序与得分,核对 usingReRank 已绑定并用于排序与过滤 |
| 岗位说明书 | 岗位名称、职责条目、生效日期与版本号需为现行版本,同一记录在两份材料里的名称与日期不能冲突 | 调整 limit 观察候选条数与得分变化,确认前几条与跨材料问题相关 |
| 重排模型 | 排序后的候选与重排得分需能支撑按得分过滤,前几条应比混合检索直接结果更相关 | 开启重排前后对比前三条的顺序与重排得分,记录候选条数与得分 |
容易做错的三处
- 现象:同一记录在培训计划与签到表里的课程名称或参训人数对不上。原因:两份材料分别录入,未按同一场次与同一批次做字段核对。
- 现象:岗位说明书引用的职责条目与现行版本不一致。原因:版本未同步,旧版岗位说明书仍留在候选里且未按生效日期过滤。
- 现象:签到表条目缺少签字或回执,却仍被当作依据输出。原因:引用裁剪未核对签字字段,回答生成未回指原文。
怎么确认配好了
本功能验收:开重排前后对比前三条的顺序与重排得分,核对候选条数与得分,确认 usingReRank 生效且 limit 调整后前几条更相关。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处,出处需来自相关材料、版本为现行、条目能对上原文。
- 在搜索参数里核对
searchMode同时启用向量与全文两路,查看候选是否同时来自两路,并对比重排前后的排序与得分。 - 按批次与场次逐项核对培训计划、签到表、岗位说明书的名称、数量、日期、签字与版本号,记录引用文本的 tokens 与数组条数。