这个品类的数据长什么样
同行评议组织的品类材料包括审稿邀请、专家审稿意见、作者修改说明,每份材料都带字段、日期与签字。审稿邀请记录稿件名称、送审时间、专家信息与回执;专家审稿意见记录评审结论、意见条目与签署日期;作者修改说明记录逐条回应、修改位置与提交日期。材料按稿件版本分批进入知识库,更新节奏跟随审稿轮次与修改稿提交。进入知识库检索与召回功能时,审稿邀请、专家审稿意见、作者修改说明各自作为独立片段来源参与召回,供后续节点或人工据此追溯异常并生成异常清单与复核结论。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。异常清单与复核结论由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 审稿邀请 | 字段、日期与签字是否与专家审稿意见对应 | 在搜索测试中切换 searchMode,看候选是否同时包含语义与全文结果,并核对邀请回执与审稿意见签署日期 |
| 专家审稿意见 | 同一记录在审稿意见与作者修改说明里的名称、数量、日期是否一致 | 开启重排前后对比前几条顺序,核对意见条目数与修改说明回应条目数,检查缺签字或回执 |
| 作者修改说明 | 版本是否与当前审稿轮次同步,修改位置与日期是否可追溯 | 用同义改写的问句各测一次,对比候选与 similarity 得分,核 limit 裁剪后引用文本是否保留关键段落 |
| 检索节点与搜索测试 | 候选片段与相似度得分是否足以支撑异常追溯 | 记录候选条数与得分,单独核引用文本的 tokens,确认 usingReRank 状态与排序变化 |
容易做错的三处
- 现象:同一记录在审稿邀请与专家审稿意见里的名称、数量、日期对不上。原因:两份材料未按同一稿件版本同步,检索命中不同轮次片段。
- 现象:作者修改说明缺签字或回执,复核结论无原始记录支撑。原因:材料进入知识库时未校验签署字段,候选片段未覆盖签署页。
- 现象:候选很多但排在前面的都不相关,回答缺少关键段落。原因:检索模式与材料形态不匹配,重排未开启或相似度过滤阈值过宽。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。
业务测试:造一条异常记录,看能否追到源头材料。
- 在知识库搜索测试里切换
searchMode,对比语义、全文与混合三种模式的候选条数与similarity得分。 - 开启与关闭
usingReRank,对比前几条顺序;记录limit裁剪后的引用条数,并单独核引用文本的 tokens。