科研项目年度进展与验收的问答受理与缺项补问:知识库检索与召回

围绕科研项目年度进展与验收的问答受理与缺项补问,说明知识库检索与召回的配置前提与核对动作,结合年度进展报告、中期检查材料确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

科研项目年度进展与验收场景涉及年度进展报告、中期检查材料、验收报告三类材料。年度进展报告按年度周期更新,含任务完成情况、经费执行、阶段成果等字段;中期检查材料在项目执行中段提交,含指标达成、人员投入、签字栏;验收报告在项目结束时形成,含最终指标、经费决算、验收意见与签字回执。三类材料进入知识库检索与召回功能时,分别作为候选片段的来源:年度进展报告提供阶段任务与日期字段,中期检查材料提供指标与签字状态,验收报告提供最终结论与回执信息。材料之间存在同一记录名称、数量、日期不一致,版本未同步,缺签字或回执等常见问题,检索阶段需先召回相关片段,再交由后续节点或人工比对补问。

配置怎么定

这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。受理记录与补齐的问项由后续节点或人工接着完成。

对象判断核验动作
年度进展报告含任务名称、数量、日期、签字字段,需与中期检查材料逐项比对在搜索测试中切换 searchMode 为语义、全文或混合,查看候选片段是否覆盖名称、数量、日期字段,记录候选条数与得分
中期检查材料含指标达成、人员投入、签字栏,需核版本是否与年度进展报告同步用同义问句检索指标与签字字段,开启 usingReRank 前后对比前几条排序,确认签字与回执片段是否被召回
验收报告含最终指标、经费决算、验收意见与签字回执,需核日期与数量是否与其他两份材料一致调整 similarity 观察候选条数与得分变化,核 limit 裁剪后引用文本是否仍保留关键字段,单独记录数组条数

容易做错的三处

  • 现象:同一记录在年度进展报告与验收报告里的名称、数量对不上。原因:两份材料版本未同步,检索召回的候选片段各自来自不同版本。
  • 现象:中期检查材料缺签字或回执,追问后仍答不出。原因:签字栏片段未被召回或相似度过滤时被裁掉。
  • 现象:候选很多但排在前面的都不相关,回答缺少关键段落。原因:未开启重排或检索模式与材料形态不匹配。

怎么确认配好了

本功能验收:用同义改写的问句各测一次,对比候选片段与相似度得分,再开关重排看前几条排序;核 searchMode、usingReRank、similarity、limit 的作用,引用条数单独记录,引用文本 tokens 另核。

业务测试:提一个缺关键信息的问句,看是否先追问再作答,追问项是否落在名称、数量、日期、签字或回执上。

  • 在知识库搜索测试里对年度进展报告、中期检查材料、验收报告分别用同义问句检索,记录候选条数与得分,对比开关重排前后排序。
  • 核引用文本是否保留名称、数量、日期、签字或回执片段,引用条数与引用文本 tokens 分开记录,不写索引状态值。