这个品类的数据长什么样
研究生培养过程管理涉及培养计划、开题报告、中期考核表等材料,来源为培养单位归档的现行版本,更新节奏跟随培养环节推进与版本修订。培养计划载明课程与必修环节,开题报告载明选题与论证,中期考核表载明进展与评议。三者进入知识库检索与召回时,各自作为独立文档被切分、索引,成为候选片段的来源;同一记录的名称、数量、日期与签字信息若在两份材料间对不上,会直接影响召回片段的可回指性。材料版本未同步、缺签字或回执时,检索仍返回候选与得分,但依据条目能否对上原文需由后续节点或人工核验。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。「可回指原文的依据条目」由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 培养计划 | 字段、日期与签字是否与开题报告、中期考核表对得上 | 在搜索测试里切换 searchMode 为语义、全文或混合,看返回候选是否同时覆盖两份材料 |
| 开题报告 | 同一记录的名称、数量、日期是否与培养计划一致 | 开启重排前后对比前几条顺序,记录候选条数与得分,核对 usingReRank 状态 |
| 中期考核表 | 版本是否为现行、签字或回执是否齐全 | 用同一问句的同义改写各测一次,看 similarity 过滤后保留的原文关键片段 |
| 知识库检索服务 | 候选片段与得分是否可回指到相关材料原文 | 记录引用条数与 limit 裁剪后的引用文本 tokens,不将数组长度与引用预算做相等比较 |
容易做错的三处
- 现象:同一记录在培养计划与开题报告里的名称、日期对不上。原因:两份材料各自导入,未做同源核对与版本对齐。
- 现象:中期考核表版本未同步,召回片段指向旧版。原因:修订后未重新索引,检索仍命中历史候选。
- 现象:缺签字或回执的材料仍被召回为候选。原因:检索只输出候选与得分,签字完整性不在召回环节判定。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序,记录 searchMode、similarity、usingReRank 与 limit 下的条数。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处。
- 在搜索测试里对同一问句做同义改写,记录候选条数与得分,对比模式切换后的差异。
- 核对返回引用文本的 tokens 与数组条数,分别记录,不将引用条数与引用内容预算做相等比较。