这个品类的数据长什么样
继续教育学时认定涉及课程备案表、学习证明、学时认定表三类材料,字段含课程名称、学时数量、学习日期、签字与回执。课程备案表用于核对课程名称与备案学时,学习证明用于核对实际学习日期与数量,学时认定表用于核对认定结论与签字。材料按周更新,同一记录在两份材料里的名称、数量、日期常对不上,版本未同步或缺签字回执。三类材料进入知识库检索服务后,各自作为候选片段来源,按字段与日期切分,供后续节点或人工据此生成进度表与统计口径说明。
配置怎么定
知识库检索服务(检索节点与搜索测试)只输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪),进度表与统计口径说明要由后续节点或人工接着做。一次检索由问题优化、语义/全文/混合召回、多路合并、重排二次排序、相似度过滤与引用上限裁剪组成,最后才得到交给模型的引用内容。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 课程备案表 | 课程名称与备案学时字段是否与学习证明一致,日期与签字是否齐全 | 在知识库搜索测试里切换 searchMode 为语义、全文或混合,对比候选片段是否同时覆盖课程名称与学时字段,记录候选条数与得分 |
| 学习证明 | 实际学习日期与学时数量是否与学时认定表对得上,回执是否缺 | 用同义改写的问句各测一次,看候选是否包含日期与数量字段,用 similarity 过滤低分片段,单独记录引用数组条数 |
| 学时认定表 | 认定结论与签字是否与课程备案表、学习证明对应,版本是否同步 | 开启 usingReRank 前后对比前几条排序,核认定结论字段是否排前,用 limit 控制候选条数,核引用文本 tokens,数组条数单独记录 |
| 进度表与统计口径说明 | 记录数与统计数是否对得上,口径是否写到表头,例外是否写清 | 用一周记录核对合计,看口径与例外是否写清,核候选片段是否保留原文关键片段 |
容易做错的三处
- 现象:同一记录在课程备案表与学习证明里的课程名称、学时数量、学习日期对不上。原因:两份材料录入时间不同,版本未同步,字段未对齐。
- 现象:学时认定表缺签字或回执,认定结论无法与学习证明对应。原因:材料流转环节漏签,回执未归档,版本未同步。
- 现象:同一问题换个说法就召回不到,候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,重排未开启,相似度过滤与引用上限裁剪未调好。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;切换 searchMode 看语义与全文结果是否合并,用 similarity 过滤低分片段,用 limit 控制候选条数,单独记录引用数组条数。
业务测试:用一周记录核对合计,看口径与例外是否写清,核记录数与统计数是否对得上,口径是否写到表头。
- 在知识库搜索测试里切换
searchMode,对比语义、全文与混合三种模式的候选片段与得分,核课程名称、学时数量、学习日期字段是否齐全。 - 开启
usingReRank前后对比前几条排序,用similarity过滤低分片段,用limit控制候选条数,核引用文本 tokens 与数组条数分别记录。