这个品类的数据长什么样
本页面向同行评议组织在授权访问与对外服务场景下的知识库检索与召回。材料来自审稿邀请、专家审稿意见、作者修改说明三类业务材料,按批次进入知识库,更新节奏随审稿轮次推进。字段包括稿件名称、审稿轮次、专家姓名、意见日期、修改说明条目、签字或回执状态。进入检索功能时,审稿邀请提供稿件与专家对应关系,专家审稿意见提供评审结论与日期,作者修改说明提供逐条回应与版本号。三类材料共同构成授权访问的可见范围依据,检索结果决定对外入口展示哪些候选片段。
配置怎么定
知识库检索服务(检索节点与搜索测试)只输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪),可对外的入口与授权范围要由后续节点或人工接着做。检索节点负责按 searchMode 选择语义、全文或混合召回,经多路合并与 usingReRank 二次排序,再由 similarity 过滤和引用上限裁剪,得到交给模型的引用内容。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 审稿邀请 | 字段:稿件名称、专家姓名、邀请日期、签字或回执状态;同一稿件在两份材料里的名称与日期需一致 | 在知识库搜索测试中切换 searchMode,核对候选片段是否同时覆盖邀请与回执字段 |
| 专家审稿意见 | 字段:审稿轮次、意见日期、评审结论、签字状态;版本未同步时日期与轮次对不上 | 用同义问句各测一次,记录候选条数与得分,观察 similarity 过滤后是否保留关键意见段落 |
| 作者修改说明 | 字段:修改条目、对应意见编号、修改日期、版本号;条目数量与意见编号需逐条对应 | 开启与关闭 usingReRank 对比前几条排序,确认修改说明与意见编号关联未错位 |
| 受限身份入口 | 访问者身份与可见范围匹配,越权不可见;引用条数按数组长度单独记录 | 用受限身份访问一次,核对候选数组条数与引用文本 tokens,不将两者做相等比较 |
容易做错的三处
- 现象:同一稿件在审稿邀请与专家审稿意见里的名称、日期对不上。原因:两份材料分别导入,版本未同步,检索候选混排后难以区分。
- 现象:作者修改说明的条目数量与意见编号对不上。原因:修改说明更新后未回写关联字段,召回时按旧版本匹配。
- 现象:审稿意见缺少签字或回执,仍出现在对外候选片段中。原因:可见范围未按签字状态过滤,检索结果直接进入后续节点。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;记录候选条数与得分,核对 searchMode、similarity、usingReRank 的实际效果。
业务测试:用受限身份访问一次,看可见范围是否符合设定;越权内容不可见,引用条数按数组长度单独记录,引用文本 tokens 单独核对。
- 在知识库搜索测试中切换
searchMode,对比语义、全文与混合三种模式下的候选片段与得分。 - 开启与关闭
usingReRank,对比前几条排序变化,并检查similarity过滤后是否保留原文关键片段。