这个品类的数据长什么样
科研项目任务书签订场景下,材料通常包括项目任务书、课题任务分解表、预算书三类。任务书给出项目名称、承担单位、起止日期与签字栏;分解表给出课题编号、负责人、任务节点与对应预算科目;预算书给出设备费、材料费、劳务费等金额与测算依据。材料多按年度或批次更新,同一记录在三份材料中的名称、数量、日期可能不一致,版本未同步时旧稿仍可被召回,缺签字或回执的页面也常混入候选。三类材料进入知识库检索时,任务书承担项目级依据角色,分解表承担课题级字段对照角色,预算书承担经费口径角色,各自以片段形式参与召回,最终由后续节点或人工拼成可回指原文的依据条目。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。可回指原文的依据条目由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 项目任务书 | 项目名称、起止日期与签字栏需与分解表、预算书逐项对照 | 在搜索测试中用同义问句各测一次,记录候选条数与得分,核对返回片段是否含项目名称与日期原文 |
| 课题任务分解表 | 课题编号、负责人、任务节点与预算科目需与任务书、预算书一致 | 切换 searchMode 为语义、全文、混合各一次,看候选是否同时覆盖课题编号与任务节点 |
| 预算书 | 设备费、材料费、劳务费金额与测算依据需与分解表科目对应 | 开启与关闭重排,对比前几条顺序,确认金额与科目片段是否排在前面 |
| 检索参数 | 候选条数与得分可记录,引用文本按 tokens 单独核对 | 调整 similarity 与 limit,记录候选条数;涉及引用上限时核引用文本 tokens,不把数组长度与预算做相等比较 |
容易做错的三处
- 现象:同一课题在任务书与分解表里的名称对不上。原因:两份材料版本未同步,旧稿仍被召回,需先核命中与关联再判断。
- 现象:预算书金额与分解表科目数量不一致。原因:预算书更新后分解表未同步,候选来自不同版本,需核对日期与签字。
- 现象:回答缺少关键段落,候选很多但排在前面的都不相关。原因:相似度过滤与引用上限裁剪后保留片段有限,需换问法重测。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;切换 searchMode 与 similarity、limit,记录候选条数与得分,引用文本 tokens 单独核对。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处,并核对出处是否来自相关材料、版本是否为现行、条目能否对上原文。
- 在知识库搜索测试中,对同一依据问题用两种说法各检索一次,记录候选条数、得分与前几条顺序,确认可回指原文。
- 把任务书、分解表、预算书按版本与签字状态分组导入,检索时核对返回片段中的名称、数量、日期是否与现行版本一致。