这个品类的数据长什么样
本科培养方案修订中,业务依据查询涉及培养方案、课程大纲、学分结构表三类材料。培养方案给出总学分与课程模块;课程大纲记录课程名称、学分、学时与签字;学分结构表列出各模块学分与占比。材料按学年更新,修订周期内版本并行,字段含日期、签字与回执。进入知识库检索与召回时,培养方案作为主依据提供框架,课程大纲与学分结构表作为佐证提供字段级细节,三者共同支撑依据条目的回指。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。「可回指原文的依据条目」由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 培养方案 | 字段、日期与签字齐全,版本为现行 | 在搜索测试中核对候选片段是否回指培养方案原文,记录候选条数与得分 |
| 课程大纲 | 课程名称、学分、学时与签字能对上培养方案 | 切换 searchMode 为混合,对比语义与全文候选,看大纲字段是否与方案一致 |
| 学分结构表 | 模块学分、占比与日期能对上培养方案 | 开启 usingReRank 前后对比前几条排序,核结构表字段与方案是否一致 |
| 检索节点 | 候选片段与相似度得分可核,引用内容保留原文关键片段 | 记录候选条数与 similarity,核 limit 裁剪后引用文本的 tokens |
容易做错的三处
- 现象:同一课程在两份材料里的名称与学分对不上。原因:版本未同步,旧版大纲未随培养方案更新。
- 现象:学分结构表的日期与培养方案签署日期不一致。原因:材料更新节奏不同,缺回执确认。
- 现象:候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,未开启重排。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处。
- 在搜索测试中切换
searchMode,对比语义、全文与混合三种模式的候选条数与得分。 - 开启
usingReRank前后对比前几条排序,核similarity与limit裁剪后引用文本的 tokens。